V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
V2EX 提问指南
vvtoo
V2EX  ›  问与答

求教硬盘选择

  •  
  •   vvtoo · 2018-04-15 22:18:55 +08:00 · 2254 次点击
    这是一个创建于 2173 天前的主题,其中的信息可能已经有所发展或是发生改变。

    有大量的数据需要储存,>50T.

    • 不是频繁读取 /写入的场景,所以初步考虑用 3.5 寸机械硬盘。

      关于这点有个疑问,同容量的移动硬盘比机械硬盘的价格还便宜,是不是可以用移动硬盘替代?原因是?

    • 单盘应该选择多大的容量?希望能在稳定和预算间取得平衡。

    • 应该选择哪个品牌的什么产品?目前考虑西数、希捷和东芝。这样的储存容量没有操作过,网上搜索得到的结果可能也不适用于这个量级,所以想在这里请教一下专业人士的意见。

    • 不考虑 RAID, 没人手维护,所以只做简单的储存规划。硬盘放在收纳箱中保存,需要的时候拿出来文件拷走使用。

    以上是目前考虑到的几点,如果有遗漏的需要注意的地方还望指教。提前谢过专家的建议。

    22 条回复    2018-04-16 11:43:00 +08:00
    imn1
        1
    imn1  
       2018-04-15 22:53:45 +08:00   ❤️ 2
    预算呢?
    数据的重要性?

    钱多,HGST 企业级监控
    钱少,TOSHIBA 3T 盘

    另外建议先统计你如何分类数据及其数据量,硬盘太多的话,数据分散,查找和读取也不方便,每天拔插不是好想法
    ScotGu
        2
    ScotGu  
       2018-04-15 22:57:08 +08:00   ❤️ 3
    >不考虑 RAID。
    壮士!你是真的不怕出现意外么?

    如果没有 RADI 的话,建议好好规划下数据的分布备份。
    比如有 1、2、3、4、5 份数据
    A 盘存 1、2 ; B 盘存 2、3 ; C 盘存 3、4 ; D 盘存 4、5 ; E 盘寸 5、1。
    保证每份数据有至少两个硬盘。这样任意一个硬盘损毁,数据还可以找回。

    读取数据的时候,硬盘的供电、震动也需要注意。很多硬盘都因为供电不稳导致损毁。
    硬盘保存的环境也要考虑,温、湿度、震动、防尘、防火……

    我觉得你的>50T 数据 ,需要专业一点的整体方案,而不是选个硬盘这么简单的事儿。
    CCNemo
        3
    CCNemo  
       2018-04-15 23:40:30 +08:00 via Android   ❤️ 1
    没写预算? 上个阵列柜?
    vvtoo
        4
    vvtoo  
    OP
       2018-04-15 23:48:44 +08:00
    @imn1
    - 在正常范围内。我知道这样说听着不靠谱,因为实际情况是之前没做过这样的工作,现在单算这些硬盘,一万左右还是可以接受的。
    - 设置储存可能更多是出于调用方便的考虑。正常流程的话会从国外调取文件,再邮寄硬盘到国内,等拿到大约需要 1-2 周的时间(如果一切顺利)。希望这样能说明对数据重要性的要求。
    - 单个文件在 50G 左右,一组约 5-20 个文件。所以数据查找和调取可能可以用比较简单的方法解决(硬盘外贴便签?)。等第一次完成全部文件的储存后,会尽量减少直接从这批硬盘复制原文件,避免插拔。

    请问这样的操作可以吗?基于您给的一些方向,可能东芝比较符合现在的预期,请问 JD 上 N 系列、X 系列和没有系列名的三款有先后推荐顺序吗?谢谢。

    @ScotGu
    - 不考虑最重要的原因是估计这个级别的 RAID 预算将完全没有操作性,我司不是 IT 相关行业所以个人判断这个方向得不偿失。也许置办 RAID 的费用可以多备一份同样的硬盘还有盈余。同时,也不会设置专门人员进行维护。以前工作中接触过 8T 的 RAID, 在有技术人员帮助的情况下也觉得使用起来是件劳心劳力的事。
    - 数据的使用情况可以见回复 imn1 中的内容,不排除在了解了各位前辈的建议后劝说老板放弃这个操作的可能。
    谢谢建议。
    lfk0000
        5
    lfk0000  
       2018-04-15 23:50:53 +08:00   ❤️ 2
    不知道你要存放的是什么,也许需要一个软件叫 Where is it,可以离线索引(在线时更新数据库),可以很方便是搜索哪个文件在哪里

    如果能买到便宜的移动硬盘,那就用移动硬盘呗,好处是不用拆开机箱,或者单独买转接底座了

    美亚的希捷 8T 移动硬盘 1000 出头我觉得非常合适,我自己买了俩 8T 一 5T,拆了盒子放电脑里用的

    不做备份就要做好丢数据的准备

    当然没说预算的话。。。上阵列柜。。。或者 100T 的 ssd 了解一下?
    cy97cool
        6
    cy97cool  
       2018-04-16 00:28:23 +08:00 via Android   ❤️ 1
    @lfk0000 感谢推荐 但似乎 where is it 只有 windows 版本 求问有没有同类软件能在 linux server 上跑的

    如果能自定义数据导入(比如各种云盘存储)就更好了
    wwhc
        7
    wwhc  
       2018-04-16 00:30:26 +08:00   ❤️ 1
    首先排除希捷,其次没人手维护不选 RAID 是可以理解的,RAID 一旦出现故障或有硬盘出错,恢复起来不比开盘省事,如果数据重要,不要考虑移动硬盘,邮寄用 HDD 硬盘的风险有点大,用 SSD 对数据安全比较有保障,虽然成本有点高
    Linxing
        8
    Linxing  
       2018-04-16 02:19:11 +08:00 via iPhone
    考虑上 raid 吧 搞两个阵列柜应该就够了
    20015jjw
        9
    20015jjw  
       2018-04-16 02:44:13 +08:00 via Android
    不上 raid 怕是不知道怎么死的..
    Remember
        10
    Remember  
       2018-04-16 02:51:33 +08:00
    50t 不上 raid, 心也太大了吧
    Remember
        11
    Remember  
       2018-04-16 02:55:13 +08:00
    如果图省钱, 至少也得上个 8 盘位的机器跑 zfs(freenas 就好), 8*10T, 2 块盘做冗余,可以提供 60T 容量.
    msg7086
        12
    msg7086  
       2018-04-16 04:16:16 +08:00   ❤️ 2
    > 同容量的移动硬盘比机械硬盘的价格还便宜,是不是可以用移动硬盘替代?
    可以。同容量的移动硬盘比机械硬盘保修短,保修的差别就是价格的差别,你可以自己决定。移动硬盘里塞的就是普通的机械硬盘。

    > 单盘应该选择多大的容量?
    3T 和 4T 技术成熟,比较适合大规模部署。单 TB 价格也可以接受。

    > 应该选择哪个品牌的什么产品?
    三大品牌都可以。要减少维护成本请选择正规渠道正品企业级。WD Re4,ST ES.3 之类的。日立不清楚。

    > 不考虑 RAID
    RAID 只是个技术,有很多种实现方法,但是不论哪种方法都会涉及到人工成本,是不可能省略的。
    要做离线单盘结构可以考虑 SnapRAID,放一台 12 盘热插拔的低配服务器,每次插 12 块硬盘上去,拷 9 盘的数据,剩下 3 盘让 SnapRAID 做冗余盘,可以在价格上找到平衡点。而且可以实现你说的,平时放在收纳箱中,要用的时候再拿出来拷,而且只需要拿有数据的盘出来,不需要一次插 12 块。

    其实要维护简单的话,我倒是觉得最简单的还是 RAID。坏盘了,亮灯了,找人把坏硬盘拔出来,新硬盘换进去,就结束了。比你自己去折腾其他方案简单太多了。我不知道你以前遇到过的 RAID 维护有多么复杂,能不能说说看?

    另外,为了让硬盘寿命错开,最好购买不同批次甚至不同品牌的硬盘混搭,减小同一时间损坏太多硬盘的风险。

    还有,记得给你的 RAID 做备份。

    总结一下:我觉得你提的要求是非常「反」正常操作的。你也可以看一下我司 NAS 的设计 /t/280177
    paranoiagu
        13
    paranoiagu  
       2018-04-16 08:18:40 +08:00 via Android
    都 50T 了,上 NAS 是必须的,数据丢不起的话,NAS 上还必须考虑冗余。zfs 可以考虑。
    FindBoyFriend
        14
    FindBoyFriend  
       2018-04-16 09:05:41 +08:00 via iPad
    raid+refs ? refs 有人应用到项目中过没?
    msg7086
        15
    msg7086  
       2018-04-16 09:15:05 +08:00
    @FindBoyFriend 不建议生产用。
    mhycy
        16
    mhycy  
       2018-04-16 09:21:43 +08:00
    硬盘采购价格:56*509=28504
    1W 是不用想了,加个阵列卡大概多 2K 左右(包括扩展板)
    方案 DELL H730p + HP 468406-b21 SAS 扩展卡

    考虑考虑
    shakoon
        17
    shakoon  
       2018-04-16 09:26:25 +08:00   ❤️ 1
    50t 最经济和安全的方案是 raid5 nas。目前 4t 盘性价比最高,建议买 16 个盘,15 个做 raid5,真实可用空间是 51t ( 1024 进制),可容任意 1 个盘损坏,还剩的 1 个盘热备救援用;或者 17 个盘 16 个做 raid6,可容任意两个盘损坏,还剩的 2 个盘热备救援用。建议多买几个品牌的,避免某批次问题导致全部数据丢失。自建 nas 服务器的话硬盘费用大约 13000,服务器大约 5000,如果卖成品 nas 服务器那价格会翻 3 倍左右。raid 必须要上,必须要上,必须要上,建 raid 非常简单的,但是这个真的非常重要非常重要非常重要
    nianbo2001
        18
    nianbo2001  
       2018-04-16 09:57:31 +08:00   ❤️ 1
    成本考虑:确实机械硬盘比较划算,比较你们只是数据量大,读写不频繁,而且保存方式也只是收纳箱吃灰,机械硬盘确实够了。虽然我家是做固态硬盘的,但是成本不适合你们,所以不乱推荐 SSD。
    品牌:国产消费类的完全不推荐,国产一般的工业级也是渣渣,国内黑盘看的太多了,之前跑市场看得心塞。推荐希捷,一定要正规渠道买,有认识的经销商最好,JD 其实有一批黑盘在里面流通,怎么进去的以及盘有多黑我不方便说,你自己往坏里想就好。
    单盘 4T~8T 都不错,起码在浪潮里的口碑不错。
    最后我们是做 SSD 的,所以也不存在为希捷打广告一说。。。
    mhycy
        19
    mhycy  
       2018-04-16 09:59:00 +08:00
    @shakoon 错了 50T 盘数不少,要安全的话 R6 可以说是最低可选项了(事实上即便是最小阵列的 R5 都是尽可能避免的)
    imn1
        20
    imn1  
       2018-04-16 10:11:24 +08:00   ❤️ 3
    首先,数据能否再次从国外调取,如果可以,不论邮寄也好,网传也好,都相当于有备份了,可以只考虑短期、中期的保管,以及快速读取优先,长期保存反而不是最重要的
    如果不能再次调取,还是建议花点钱上 raid,至少 raid6 (可两盘同时损坏那种)

    我个人经验( 20 年来买过约 80 只硬盘),硬盘质量(仅机械硬盘,不包括 SSD 和混合硬盘)感受如下
    我没怎么买过企业级硬盘,不评价
    日立 /HGST/TOSHIBA 2 寸 > 三星 /希捷 2 寸 > HGST 3 寸 > TOSHIBA 3 寸 > 希捷 3 寸
    国外近期的一些统计也是 HGST 6/8T 损坏最少,TOSHIBA 4T 其次,但那个可能是经常刷写的,有点不同
    我不相信西数,2012 前买过 7 ~ 8 只西数( 3 寸),全灭,其中半数损失数据

    要解释一下「全灭」的意思:
    我一般一定时候会倒腾数据,例如小容量转到大容量,旧硬盘转到新硬盘之类
    倒腾之后,原来的盘就弃用或者不再用作保存,只用于下载或临时存放
    西数大约 4 只在倒腾前就坏掉,其他在弃用前坏掉
    希捷在弃用前坏掉,有三四只(含一只 2 寸)
    东芝在弃用前坏掉,仅有一只
    日立 /HGST 在弃用前无坏掉
    2 寸目前弃用累计 8 只( 500G 以下),在弃用前仅一只坏掉,就是上面说的希捷,其他约 10 只还在服役

    另外,上面说的有西数、希捷、三星各一只,是在两个 orico 外置设备下损坏,时间接近(几个月内),所以我之后也不再购买这个牌子的外置盒了,是否只是个例不清楚

    倒腾数据的时间段没有固定,一般是时代发展新的大容量硬盘便宜下来,约使用 4 ~ 5 年吧
    弃用也是嫌弃容量太小为主,约使用 7~8 年
    以上是 非 监控 /企业级硬盘的 「个人主观感受」,仅供参考
    我目前使用的机械硬盘,2 寸最小 500G,3 寸最小 2T,低于这个容量,我觉得挂上也费电

    20 年中最奇葩的一次,唯一一次,电脑城买了个三星 3 寸,回家就不认,和店家很熟,马上给换了希捷,还退了差价,那是还没 JD 的时代,不要和现在的电脑城相比

    以上「经验」基于一个前提,手头数据大部分不重要,而且随着年纪增大,越来越觉得丢了也不可惜
    其中约 5T 我比较珍视的,是用了 2 寸盘做双备份
    另外我也没有经常全部读取的需求,所以没必要全部硬盘都在线挂着,费钱费电还热,只用一个 4 位不带 raid 的硬盘箱

    不熟悉以及没有专人看管的话,不建议软 raid,我有两个网管的朋友(用*nix 服有 10 年经验)都被这东西折腾惨

    还有一种方案——磁带。磁带不贵,只是磁带机很贵,超贵,磁带的保存期是超长的,有足够预算也可以去了解一下
    例如看看有没有租用机器的可能(有钱买当然最好),这样以磁带做备份,硬盘做平时读取
    nianbo2001
        21
    nianbo2001  
       2018-04-16 11:02:07 +08:00
    @imn1 这哥们就很实在了~西数之前没接触过,看到全灭我也不想接触了。
    sundayhk
        22
    sundayhk  
       2018-04-16 11:43:00 +08:00 via Android   ❤️ 1
    要么 hgst 4t 企业盘,要么东芝 4t 普通盘。
    关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   我们的愿景   ·   实用小工具   ·   3313 人在线   最高记录 6543   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 27ms · UTC 13:20 · PVG 21:20 · LAX 06:20 · JFK 09:20
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.