V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
efsg
V2EX  ›  NAS

对 NAS 进行一次大更新,现在求更新方案

  •  1
     
  •   efsg · 37 天前 · 3193 次点击
    这是一个创建于 37 天前的主题,其中的信息可能已经有所发展或是发生改变。

    已经买了 8 块银河 X12 替换掉了旧的监控盘,CPU 也打算升级到 5700X3D ,作为主力机使用

    这个 B550 主板只有 1 条×16 和 2 条×1 还有 1 条×4 ,而且还需要装 544FLR 网卡,至于拆分显卡不现实,机箱不支持竖装显卡,那种 Oculink 的延长线接到机箱外面又太贵了,所以只能让显卡占用×16 ,而 544FLR 网卡是肯定要装在×4 上面的

    还有一个昏招,就是把主板上面的 PCIE4.0 M.2 转成×16 ,这样可以继续用老的 SAS2308 阵列卡,但我认为这么干实在浪费,主板 3.0 和 4.0 的 M.2 各 1 条,这么干就只能继续用 3.0 的老盘(下面 3.0 的 M.2 散热片和芯片组是一体的,不能拆开),感觉还不如买 SAS3108 或者 PCIE3.0 的 SATA 扩展卡更好

    然后是系统,已经不打算继续用 TrueNAS 了,如果放弃 ZFS 可以考虑群晖,然后用 SAS3108 阵列卡 IR 模式,也能像 ZFS 一样单独替换坏掉的硬盘,但这样速度始终就被限制在 10Gbps 了(装在×1 上面),我看威联通 QuTS5.1 支持 ZFS 了,但好像新版 5.1 不能破解安装盗版,如果是虚拟机买正版授权按 CPU 核心收费就会非常贵

    所以现在的问题是有没有办法物理机或者虚拟机安装盗版威联通 QuTS ?要支持 ZFS 功能才行

    然后是软硬件的搭配,系统是打算用 PVE 虚拟化,开一个 NAS 系统和 Windows ,同时兼顾 NAS 和主力机,想问问群友的意见

    第 1 条附言  ·  37 天前
    显卡问题解决,直接换了铭瑄的 W680 主板,换掉 B550 平台,PCIE 够用了

    现在的问题是如何选择 NAS 系统,群晖或者威联通,甚至 Windows 存储池都行,不考虑 OMV 和 TrueNAS 还有 Unraid
    19 条回复    2024-04-23 14:25:21 +08:00
    juzisang
        1
    juzisang  
       37 天前
    没看懂提什么意见,说起来,我最近想整个 Oculink 外接出来放长显卡的,好像也不是特别贵,300 多的也有,比雷电要便宜多了。
    lm930129
        2
    lm930129  
       37 天前
    威联通有破解的,自己百度下就知道了,就是虚拟化系统破解的。
    imoru
        3
    imoru  
       37 天前
    不如直接换 openmediavault,支持 zfs 还免费
    FrankAdler
        4
    FrankAdler  
       37 天前
    nas 为什么要用 x3d 的 CPU 呢,
    黑威联通 5.1 现在已经能安装了,但是不如黑群晖那么完美,我尝试过,问题还挺多,暂时观望。
    用 pve 我觉得挺好的,把应用隔离到虚拟机或者 lxc ,用好自带的备份功能,宿主机不做额外配置,宕机后还原能直接 100%恢复原来的样子
    cpstar
        5
    cpstar  
       37 天前
    PCIE 的问题,显卡我觉得可以甩到 X4 上,544FLR 如果硬需要,建议放到 X16 上,毕竟作为 NAS ,显卡带宽有个 X4 也就够了,就算是玩游戏也不会太大差别。而 40G 不上足带宽,那等于扯淡。至于 M.2 只能引出 X4 ,就算是 X16 也白搭。所以 2308 也好还是啥,X8 也是底线,于是这就打架了。没有两个 X8 ,主板赶紧换。不是 XEON ,CPU 的 PCIE 通道数是硬伤。

    系统的问题,不用 truenas ,倒回到群晖的 btrfs 没必要啊,怎么说 zfs 前景还是比 btrfs 好一些。而 qutshero ,可能是省心里边,比 truenas 好一些的。

    我的也是刚折腾完,弄了 TANK 1581D 的板子带 U ,三个 X8 可以随心所欲,一个 1650 ,一个拆 x4x4 的 M.2 ,再来一个 3008 ( IT 直通卡应该比 IR 省心),40G/10G 我都没有需求。有了 3008 带 8 块盘,主板可以带 6 块(实际配置了 4 个),板子上的 M.2 不用,拆分 x4x4 两个 M.2 。以前的就是 Q 家 NAS ,所以这次延续了 QuTS hero ,照着 TVS-h1288X 做的系统。
    cpstar
        6
    cpstar  
       37 天前
    另外,我办公室的机器上挂了四块,然后上了 minio 做对象存储,给 qnap 的 hbs 做备份
    deorth
        7
    deorth  
       37 天前 via Android
    x3d 做 nas ,富哥 v 我 50
    efsg
        8
    efsg  
    OP
       37 天前 via Android
    @cpstar QTS Hero5.1 能安装了吗,有没有教程,我去抄作业
    xinmans
        9
    xinmans  
       37 天前
    @cpstar 也是 tank 的 d1581 板 U 套装,500 块入的。3008 和 sas2308 的区别是啥呀?刚整了 2308 。同样用了送的 x4x4 的 m.拆分卡。额外再买了一个块 p600 转码。
    ShCby
        10
    ShCby  
       36 天前
    为什么不把换 5700X3D 的钱省下来,一台主力机一台 NAS 呢,再说了如果用 proxmox ve 做底层再开虚拟机也用不上 X3D 的缓存优势

    NAS 系统的话,如果换的硬盘都是同样大小的,不如继续用 truenas ,如果换的大小不一样就用黑群晖吧,可以用 SHR
    efsg
        11
    efsg  
    OP
       36 天前 via Android
    @ShCby 已经换成 W680+13500 了,目前在考虑放弃 ZFS 改用黑群晖
    xuegy
        12
    xuegy  
       36 天前 via iPhone
    都已经虚拟化了,那不如把 ZFS 用 iSCSI 挂载到群晖上用。
    ltkun
        13
    ltkun  
       36 天前 via Android
    我也一直在尝试 AIO 不同的是系统我坚定的选 PVE
    cpstar
        14
    cpstar  
       36 天前
    OP 8# 手法应该没区别吧,hero 还是 qts ,4.x 还是 5.x ,官方包都是用 QNAPNASVERSION4 作为密钥加密的。我用的 laojifuli 的牛年母盘,做 model.conf ,做一些额外的 hwmon 驱动和其他需要的,没什么大问题。但是那个母盘的程序有可能是 BUG 的地方,没把 sig 放到启动分区里边,所以启动后会报告没有签名什么的,应该是 5.x 之后新加入的而 4.x 没有 sig 文件。
    至于目标机型的官方系统区别,的确有不同,应该是针对不同硬件主板做了小的适配,但是我感觉差别不大,毕竟都是 x86 的架构。我的 1581 最佳适配肯定是 TS-h886 系列,但我的盘多 8+4 ,为了看起来更合适,用了 TVS-h1288X ,似乎也没什么问题。而后期再升级,为了不出问题,打算走手动——看官方系统包的内容,可能就是升级关键启动分区里的几个文件而已。
    整个环节最需要动手的就是 model 文件,一部分是硬盘接口的配置,一部分是硬件监控的配置,还有一个小点就是引导盘的配置,其他都没难度——有点 linux 原理基础,写起来就很轻松了。

    当然我没有做 pve 虚拟什么的,就是直接装,如果通过虚拟化再走黑威,model 不同配置一下。

    @xinmans 9# 如果直通且机械 SATA ,除了接口 8643 和 8087 ,没啥区别,哪个便宜哪个来吧。
    cpstar
        15
    cpstar  
       36 天前
    另外从效率上来讲,多块硬盘,看是要做成一个盘用还是多个盘分散用。分散用,我目前看到的唯一无成本方案就是 minio 对象存储,不需要做阵列,并行写入效率能够拉满。
    而做成单一盘,要么硬 RAID ,要么软 RAID 。硬的当然省心,但是卡不便宜,还会有 cachecade 授权等限制。软的方面,最好的应该就是 zfs 了,而 windows 存储池就是个垃圾,lvm 或者 mdadm 也只强点有限。但是 zfs 的效率,某种程度是靠吃内存(内存开缓存)解决的。
    然后是通过虚拟化一层解决多盘合一还是在 NAS 系统层自己搞定,那就综合判断吧。
    wtsamuel
        16
    wtsamuel  
       36 天前
    我现在还是把 truenas 镶在 pve 上,但是还是不稳定。
    之后我还是打算把 truenas scale 单独拆出来,只管理硬盘,只使用 zfs
    libook
        17
    libook  
       36 天前
    考虑的三个都是盗版?我是从 OMV 换到 unRAID ,对我个人来说,用盗版可能还不如装个 Debian 自己配。第三方破解有安全风险、没有售后、不方便更新以使用新特性或修复问题。

    多一个环节就多一个故障点。PVE 可以看看是不是真的需要,因为 PVE 是基于 KVM 的,而几乎所有 Linux 发行版都集成了 KVM ,除非你在硬件和功能上有一些只有 PVE 能满足的刁钻需求。所以大多情况下,一个基于 Linux 的 NAS 系统基础上跑 Windows 虚拟机应该就可以满足需求了。

    文件系统看你数据是热数据还是冷数据。热数据就上 RAID ,这块通常都会选择 ZFS ;冷数据就 JBOD+校验,还能休眠硬盘省电。
    ronyin
        18
    ronyin  
       36 天前
    你这个 nas 需求有点高端。。。
    xinmans
        19
    xinmans  
       36 天前
    @wtsamuel 我目前是镶在 unraid 上,还算 ok 。 正准备迁移到 pve 里。你咋不稳定了?说说表现?
    关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   3053 人在线   最高记录 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 22ms · UTC 12:09 · PVG 20:09 · LAX 05:09 · JFK 08:09
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.