V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
V2EX 提问指南
mrhuiyu
V2EX  ›  问与答

突然有个很牛的想法肯定可以实现?请问这是不是可能!?

  •  
  •   mrhuiyu · 2015-12-05 09:25:54 +08:00 · 4147 次点击
    这是一个创建于 3077 天前的主题,其中的信息可能已经有所发展或是发生改变。
    我想把一百台电脑做成分布式存储,也就是说把一份文件分布存储在 100 台电脑上面。
    例如: 100G 文件分别存储在一百台电脑上面( 100G 文件拆分成可用电脑数然后在分发下去保存,然后每份复制两份到另外的电脑做到互备)这样的想法是否可行呢?
    36 条回复    2015-12-07 11:36:10 +08:00
    Valyrian
        1
    Valyrian  
       2015-12-05 09:27:52 +08:00
    不就是普通的分布式文件系统吗
    churchmice
        2
    churchmice  
       2015-12-05 09:29:23 +08:00 via Android
    什么鬼,这破玩意早就有了吧
    mrhuiyu
        3
    mrhuiyu  
    OP
       2015-12-05 09:37:24 +08:00
    @Valyrian 刚刚搜索分布存储没找到相关的资料。。。。
    mrhuiyu
        4
    mrhuiyu  
    OP
       2015-12-05 09:37:43 +08:00
    @churchmice 额。。。是么。。。。原来太落后了。。。
    bengol
        5
    bengol  
       2015-12-05 09:39:52 +08:00 via Android
    囧,你太有才了
    mrhuiyu
        6
    mrhuiyu  
    OP
       2015-12-05 09:43:43 +08:00
    @bengol 我也觉得,感觉特牛。。。。
    HentaiMew
        7
    HentaiMew  
       2015-12-05 09:45:24 +08:00
    … 这是大数据处理的基本条件之一
    10iii
        8
    10iii  
       2015-12-05 09:45:46 +08:00   ❤️ 2
    你们不能单纯从字面上理解楼主的意思.
    我觉得楼主是在高级黑:重复造轮子.
    crowds
        9
    crowds  
       2015-12-05 09:51:47 +08:00
    libo26
        10
    libo26  
       2015-12-05 10:01:24 +08:00
    请搜索 HDFS
    HancockXu
        11
    HancockXu  
       2015-12-05 10:27:25 +08:00 via iPhone   ❤️ 1
    即使已经实现了,也至少说明楼主的想法是对的。只不过晚出生了十年~_~
    hlg002
        12
    hlg002  
       2015-12-05 10:55:41 +08:00   ❤️ 1
    你有哪些曾经自认伟大、能赚钱的创意,被发现已经被别人实现,或被证明不可行?
    http://www.zhihu.com/question/20740896
    CheungKe
        13
    CheungKe  
       2015-12-05 10:58:57 +08:00
    楼主不会是被人骗了,要拉你技术入股
    mrhuiyu
        14
    mrhuiyu  
    OP
       2015-12-05 11:18:14 +08:00
    @HentaiMew 只觉得大数据离我太远还没学到那个境界。。。。
    mrhuiyu
        15
    mrhuiyu  
    OP
       2015-12-05 11:18:34 +08:00
    @10iii 没准能把轮子做的更好呢~
    mrhuiyu
        16
    mrhuiyu  
    OP
       2015-12-05 11:18:54 +08:00
    @libo26 似乎只能在 linux 下运行。。。。
    mrhuiyu
        17
    mrhuiyu  
    OP
       2015-12-05 11:19:58 +08:00
    @HancockXu 额似乎想到的太晚了。。。。
    @hlg002 额。。。。
    @CheungKe 没。。。。早上在看硬盘剩余空间时突然想到的想法而已。。。。。
    lyz1990
        18
    lyz1990  
       2015-12-05 11:22:45 +08:00   ❤️ 1
    思而不学则殆
    lyz1990
        19
    lyz1990  
       2015-12-05 11:28:01 +08:00
    共勉之
    zbz
        20
    zbz  
       2015-12-05 11:34:35 +08:00
    骚年,多读 paper 少 YY
    e1eph4nt
        21
    e1eph4nt  
       2015-12-05 13:41:11 +08:00
    你的问题在于想得太多而书读的太少。。。
    wanhuiming
        22
    wanhuiming  
       2015-12-05 15:44:27 +08:00
    标题党就应该爆菊花,爆到烂的那种。
    kinderiu
        23
    kinderiu  
       2015-12-05 15:53:35 +08:00
    哈,高级轮
    msg7086
        24
    msg7086  
       2015-12-05 16:20:16 +08:00 via Android
    5 年多前在 jsharer 已经做过这事情了。

    ps:你知道跑 100 台 windows 要多少钱么…
    Andy1999
        25
    Andy1999  
       2015-12-05 16:25:42 +08:00 via iPhone
    之前想拉裸纤到 HKIX 结果已经有人实现了
    mrhuiyu
        26
    mrhuiyu  
    OP
       2015-12-05 18:37:25 +08:00
    @Andy1999 哈哈~我是直接把树莓派扔过去的。。。 https://v2ex.com/t/212237#reply44
    Bryan0Z
        27
    Bryan0Z  
       2015-12-05 19:26:13 +08:00 via Android
    晋太元中,火星人捕鱼为业
    ilikekindle
        28
    ilikekindle  
       2015-12-05 21:44:22 +08:00
    我觉得既然在 v2 提问,肯定不会像大家感觉的那么幼稚吧?
    楼主可以详细解释一下,没准有什么亮点呢。
    ilikekindle
        29
    ilikekindle  
       2015-12-05 21:46:58 +08:00
    @hlg002 多谢你提供的文章。
    zwy
        30
    zwy  
       2015-12-05 22:22:33 +08:00
    这就是 HDFS 啊,哈哈
    iyaozhen
        31
    iyaozhen  
       2015-12-05 22:44:30 +08:00
    @e1eph4nt 唉,确实应该多读书。有时能想到,造个轮子都造不了。
    wibile
        32
    wibile  
       2015-12-05 23:43:51 +08:00
    “我不是针对你,我是指在坐的各位”,有什么惊天地泣鬼神的想法之前都好好搜索搜索,凭大家的智商暂时想不出什么超前的想法!!!全球 70 亿人,各种想法都被想滥了,你不知道不代表没有,还有相当一部分想法囿于现实条件没法实现而已。
    mengzhuo
        33
    mengzhuo  
       2015-12-06 10:23:16 +08:00
    楼主没用过 P2P 下载吧……
    mrhuiyu
        34
    mrhuiyu  
    OP
       2015-12-06 13:21:56 +08:00
    @ilikekindle 搜索了其他人回复的 HDFS 后觉得和我的想法一样,但是还有一些出入(可能我对他了解不够?)
    想法详细版:有一百台 windows 操作系统客户机公司电脑,当然不止一百台,有些电脑硬盘是 2t 起步但是只是用到了 200G 不到三百 G 的容量 但普遍是 1t 起步使用的容量也是才 300G 。感觉超级浪费,想做一个文件服务器,指定一个 ip 地址 ip 地址是某操作系统(我还不知道用 linux 还是 windows )用这种想法来实现。把一个文件分布存储在这一百台电脑上面当然也有备份,存储是根据客户机的硬盘容量进行存储,但是有些客户机的硬盘分区很奇葩所以客户机也安装一个和服务器对应的客户端然后形成客户端可以对整块硬盘绕过分区来存储的方法(例如: DEFG 四个盘符,优先向最后一个盘符存储资料,存储的资料客户端无法进行删除只能用客户端删除,如果G盘满载就向F盘存储,如果 DE 都是快满载的状态则是两个合起来存储,设定一个阈值,到一定容量不再存储)。当客户机1读取一个文件时如果恰巧在本地存有备份那么直接从本地拷到客户需要放到的地方例如拷贝1 txt 文件如果在本地有存放那么就可以直接和客户端读取然后放置到桌面或者其他指定的地方。客户机可服务器沟通只是确定文件在那一个客户机 ip 如果是自己 ip 就用客户端来拷贝,如果不是是其他那么就用服务器做代理拷贝文件。
    mrhuiyu
        35
    mrhuiyu  
    OP
       2015-12-06 13:22:18 +08:00
    @mengzhuo 用过。。。。
    yuriko
        36
    yuriko  
       2015-12-07 11:36:10 +08:00
    @mrhuiyu 这个不是典型的 P2P 下载加速么……

    之所以没有这么玩这么大纯粹是没有客户会这么配合吧……
    关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   我们的愿景   ·   实用小工具   ·   1192 人在线   最高记录 6543   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 85ms · UTC 18:35 · PVG 02:35 · LAX 11:35 · JFK 14:35
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.