V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
这是一个专门讨论 idea 的地方。

每个人的时间,资源是有限的,有的时候你或许能够想到很多 idea,但是由于现实的限制,却并不是所有的 idea 都能够成为现实。

那这个时候,不妨可以把那些 idea 分享出来,启发别人。
devlnt
V2EX  ›  奇思妙想

当下, SSD 作为缓存在网络储存中的作用,到底是什么样的?

  •  
  •   devlnt · 2019-08-18 14:39:30 +08:00 · 7387 次点击
    这是一个创建于 1685 天前的主题,其中的信息可能已经有所发展或是发生改变。
    Q1:有没有作用?
    Q2:作用大不大?

    看到央视科技的一片文章后产生的疑问,望指教
    文章原文: http://www.cctvpro.com.cn/2019/06/05/ARTI1559720370666597.shtml
    39 条回复    2019-08-21 12:30:20 +08:00
    zhangchao12cn
        1
    zhangchao12cn  
       2019-08-18 15:05:28 +08:00 via iPhone
    Qnap 有一个叫 qtier 的技术,会用在以高带宽为卖点的 nas 上。
    InuYasha1987
        2
    InuYasha1987  
       2019-08-18 15:29:15 +08:00
    https://www.bilibili.com/video/av45540667
    白嫖王搞过几次这种评测了,总而言之效果是有的但是不明显,不如全换便宜 SSD
    devlnt
        3
    devlnt  
    OP
       2019-08-18 17:02:49 +08:00
    @InuYasha1987 全闪存的密度不如 HDD 高。另外他自己也用的是 HDD 当存储
    azh7138m
        4
    azh7138m  
       2019-08-18 19:23:14 +08:00
    SSD 密度才会高,4U 可以上 PB,60*60T
    很多场景下 HDD 的速度不够
    A1:有
    A2:大
    InuYasha1987
        5
    InuYasha1987  
       2019-08-18 19:35:19 +08:00
    @devlnt 他那服务器里白嫖的三星高端 NVME 盘都 30 多个 T 了,HDD 只放冷数据。
    自己用的话纯用便宜的中低端 SSD 就行,成本比这种高低搭配还要低
    devlnt
        6
    devlnt  
    OP
       2019-08-18 22:07:04 +08:00
    @InuYasha1987 那个 nvme 的服务器是编辑时候用的,这不是他找不到合适的缓存方法么=_=
    devlnt
        7
    devlnt  
    OP
       2019-08-18 22:14:31 +08:00
    @azh7138m 咱能讨论下能买到的东西么。。。那玩意儿买到了,一般的控制卡也用不了啊。。
    azh7138m
        8
    azh7138m  
       2019-08-18 22:24:10 +08:00 via Android
    devlnt
        9
    devlnt  
    OP
       2019-08-18 22:28:37 +08:00
    @azh7138m 人家还可以 5.4PB 呢。。https://www.servethehome.com/seagate-shows-off-60tb-ssd/
    雨我无瓜
    devlnt
        10
    devlnt  
    OP
       2019-08-18 22:34:49 +08:00
    @azh7138m 那个设计图是那个机器的。。并不能买到 60TB 一块的硬盘。。那个机器最大只说到 8TB。。。
    azh7138m
        11
    azh7138m  
       2019-08-18 23:10:29 +08:00 via Android   ❤️ 1
    @devlnt 开源的是个 4U 机箱啊,没毛病,你加钱还有 3.5 的 100T 呢,我只是举个例子

    我不明白杠点在哪里。。。
    我回答了问题
    举例只是说明 SSD 的密度比 HDD 是要高的
    backblaze 选 8T 不是最高 8T,是当时这个容量性价比最高
    mmtromsb456
        12
    mmtromsb456  
       2019-08-19 01:21:06 +08:00 via iPhone
    同样赞同楼上.2016 年三星推 3D-NAND 的时候已经有人表示闪存的存储密度要高于机械硬盘的存储密度.2016 年的时候才开始推 TLC 没多久.现在 3D-NAND 都发展到第三代了.QLC 都开始出货不少民用产品了.更不提企业级市场的 EDSFF.1U.Long aka E1.L 了.
    https://www.forbes.com/sites/tomcoughlin/2016/02/03/flash-memory-areal-densities-exceed-those-of-hard-drives/#14e8f6797c72
    msg7086
        13
    msg7086  
       2019-08-19 02:01:27 +08:00
    SSD 或者其他快速存储的主要功能是写入缓冲和读取缓存。
    一个是写入的时候先写入快速存储器,然后慢慢回写到硬盘。
    另一个是把热数据留在快速存储器上,读取的时候直接写入网络。

    @devlnt 全闪密度可以做到比 HDD 高得多。
    至于「买到」,你如果是说「消费级市场可以买到」的话,那可能不一定做得到。但是如果只是花钱去定制产品的话,根本就不是问题。现在 M.2 的消费级 2280 已经可以轻易做到 2TB 了,厚度也就几毫米,价格也就 200 刀,3.5 寸硬盘等体积可以轻易做到 40TB 以上(重排闪存芯片并级联主控,再加上 PCIe 交换机),而且价格,会非常非常便宜( 100 刀 /TB 以下)。这种时候要解决的问题就在于热插拔时的容量损失(拔掉一块硬盘就是几十 TB 的数据重建)和单盘可靠性了。所以将来如果要做全闪高密度热插拔的话,肯定是要用新型的热插拔接口,然后背板上做 PLX,每个 PCB 上只焊比如说 16TB 的存储芯片,一个 2U 插几十个全闪条子。类似 SSG-136R-NR32JBF 的设计。
    alphatoad
        14
    alphatoad  
       2019-08-19 05:01:38 +08:00 via iPhone
    我记得 ZFS 有这方面的实现
    devlnt
        15
    devlnt  
    OP
       2019-08-19 08:58:34 +08:00
    @msg7086 ssd 缓存可以做到像阵列卡上的缓存一样的方便吗?如何设置呢
    devlnt
        16
    devlnt  
    OP
       2019-08-19 09:15:27 +08:00
    @azh7138m 我是指那个 60TB 一块的硬盘,这个一般买不到。。。机器盘多的有很多。。。Leave it.
    zjqzxc
        17
    zjqzxc  
       2019-08-19 09:19:49 +08:00
    有作用,作用很大;具体可以参考微软 SDS 文档 https://docs.microsoft.com/zh-cn/windows-server/storage/storage-spaces/understand-the-cache
    hst001
        18
    hst001  
       2019-08-19 09:56:42 +08:00
    作用很大的,有些数据库使用 SSD 作为存储介质,性能接近内存数据库。
    msg7086
        19
    msg7086  
       2019-08-19 10:42:01 +08:00 via Android
    @devlnt 或许 zfs ?
    CallMeReznov
        20
    CallMeReznov  
       2019-08-19 10:46:39 +08:00
    Q1:有
    Q2:很大

    公司自建 CEPH 使用者如是说
    devlnt
        21
    devlnt  
    OP
       2019-08-19 12:06:56 +08:00
    msg7086
        22
    msg7086  
       2019-08-19 13:49:30 +08:00 via Android
    前面看新闻,正好就看到了 EDSFF 标准,你可以了解一下,一根尺子 30tb。
    devlnt
        23
    devlnt  
    OP
       2019-08-19 14:56:20 +08:00
    @msg7086 Again.以正常公司能买到为标准。不用说什么会展上的,不用说什么定制的。你们说的那些我都知道,那些新闻出来的时候就看过了。
    no1xsyzy
        24
    no1xsyzy  
       2019-08-19 15:30:23 +08:00
    @devlnt 正常公司不能花钱定制还是咋的?是得托关系还是得评资质啊?
    另外,不少地方 U 比那点钱金贵。
    carmark
        25
    carmark  
       2019-08-19 15:44:16 +08:00
    简单来看就是 fscache,2010 年左右的实现,在 kernel 里面,一般应用 ok 的,但是负载过高的话会有各种各样的 bug,我们是自己用 fuse 实现了一下。
    devlnt
        26
    devlnt  
    OP
       2019-08-19 16:11:51 +08:00
    @no1xsyzy 你一下掏几个亿当然没问题。但这是正常公司么?
    no1xsyzy
        27
    no1xsyzy  
       2019-08-19 18:35:10 +08:00
    @devlnt 你是不是用错词了?难道腾讯阿里都是不正常公司?
    msg7086
        28
    msg7086  
       2019-08-19 23:31:31 +08:00 via Android
    @devlnt 展会上发布的东西不能买?都是量产的东西,只不过没放到二手东和淘宝上卖你也不能当他们不存在吧。
    而且几个亿?张口就莱还行。你找牙膏厂定做 CPU 都不一定要几个亿。
    devlnt
        29
    devlnt  
    OP
       2019-08-20 06:01:55 +08:00
    @no1xsyzy 法律上是,但是这种公司占比太小,他们能做的正常公司做不了,不具备普世性,并不能将他们看作正常公司
    devlnt
        30
    devlnt  
    OP
       2019-08-20 06:03:38 +08:00
    @msg7086 SSD 不一定比 cpu 定制便宜。对比下数量问题。会展上的东西,还真不一定可以买,有些直接就凉了,参考 5G@28C+冰箱那个
    msg7086
        31
    msg7086  
       2019-08-20 07:52:46 +08:00 via Android
    @devlnt 你说的那个是演示品,这个是量产机型,就像主板显卡之类都准备开卖了,能一回事嘛。
    更不说这个不仅已经标准化了,而且还是很多家都已经出产品了。
    ruib
        32
    ruib  
       2019-08-20 11:41:37 +08:00 via iPhone
    @CallMeReznov 能简单介绍下怎么实现的吗?谢谢
    no1xsyzy
        33
    no1xsyzy  
       2019-08-20 12:25:45 +08:00
    @devlnt 我明白什么情况了,请和你的语文老师详谈,正常和普遍有什么区别
    CallMeReznov
        34
    CallMeReznov  
       2019-08-20 14:52:14 +08:00
    julyclyde
        35
    julyclyde  
       2019-08-20 16:52:50 +08:00
    as 缓存 就没啥用
    这年头已经是全闪存的年代了
    msg7086
        36
    msg7086  
       2019-08-21 08:25:07 +08:00
    @julyclyde 考虑硬件成本而不考虑房产成本的时候还是用旋转盘更便宜啊。
    julyclyde
        37
    julyclyde  
       2019-08-21 11:13:57 +08:00
    @msg7086 这个……创不起业就别创了
    别让客户觉得慢
    devlnt
        38
    devlnt  
    OP
       2019-08-21 12:12:06 +08:00
    @julyclyde 如果是全 Sata 闪存也可以有 SSD 缓存。参考 zjqzxc 提到的那个文档。此问题专注于高速固态盘在低速存储中的加速效果
    msg7086
        39
    msg7086  
       2019-08-21 12:30:20 +08:00
    @julyclyde 为什么旋转盘会让客户觉得慢?为什么不能让客户觉得慢?创业公司就不需要考虑客户支付的价格?不需要考虑收入和支出的比重?阁下创业过吗?
    关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   我们的愿景   ·   实用小工具   ·   5372 人在线   最高记录 6543   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 32ms · UTC 07:07 · PVG 15:07 · LAX 00:07 · JFK 03:07
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.