自建 NAS 的存储方案的技术选择，求建议

前帖提要：链接在此

在上回发帖之后，中途也陆陆续续对现有 NAS 做了些许改动，作为不折腾不舒服星人，出于各种原因，打算进行更动

先总结一下目前配置的优点：

1. 体积小、做工在线、4 盘位热插拔；
2. 机箱容量大：虽然是 4 盘位机箱，但实际上我可以塞入 3.5 寸4 、2.5 寸4，目前板子仍空着一张 M.2 2242 插槽，所以还可以加入一个 2.5 寸 U.2 盘；
3. 主板接口足够：
4. 性能还不错，因为用的 8500，我日常开着两个 docker lxc （一个默认科学上网、一个直连，上面各运行数个 docker 容器）、2 个 WIN10 VM 、一个 Debian Testing 开发机、一个 Hackintosh VM （ surge 盘路由），剩余若干 lxc 容器（ samba 、webdav 、plex 、syncthing 、jellyfin(专攻受限影片)等）；
5. IPMI 维护便利。

期间发现的一些不足及缺陷（不分排名先后）：

1. 噪音。由于房屋面积实在有限，机箱目前被安置在客厅，这就导致在客厅观影的时候经常受到硬盘炒豆子声音的影响；
2. 四盘位机箱维护不便。使用期间发生了三个 pool 分别发生了一次降级事故，2.5 寸硬盘倒还好，腾挪方便，由于我的存储 pool 用满了四张盘，3.5 寸的替换确实有些困难；
3. PCI-E 插槽的不足之一。之前在采纳 ITX 作为主板时，考虑万兆的需求还比较遥远，AIO 一体机对于万兆的需求相对也不太高就暂时放弃，当时也是看到了 QNAP 及其它厂商所出的 2.5G/5G USB 网卡，感觉在全面万兆内网前可以凑活，遂暂时放弃，但实际使用中发现 USB 网卡在使用中存在着过热降速、延迟不稳定的情况，SAD ；
4. PCI-E 插槽的不足 2 。其实组装前就想要在机子上有一个直通显卡的 WIN10 VM 和 Hackintosh VM，但是后来采用了 NUC8+雷电显卡坞的方案解决，但发现这个方案有些 bug，打算淘汰掉这个组合，所以这也就成为了一个缺点
5. 容量不足。这一点严重失误，估计不足。受限于 ZFS 以及盘位闲置，存储空间的升级实在太贵，大家都懂。

于是基于上述理由，开始寻找替代方案，也请各位 V 朋指教：

1. 机箱。目标 8-10 盘位机箱。考虑到 PCI-E 扩展性及散热性能，锁定了几款 ATX 机箱，Define R5 、Define R6 、Antec P101-S 这几款机箱，目前偏好 R6，因为打算放入双显卡及万兆卡，目前手上两张都是双槽卡，R6 这方面最合适，静音效果看起来也不弱；
2. 主板。目标是三条 x8 、一条 x4 槽位（双显卡+冗余 HBA 卡+万兆卡），可以使用相对便宜的 REG DDR3/4 、U 性能相对不那么落伍（因为需要玩游戏及桌面 VM，所以希望主频不低、核心数也够）、同时虚拟化相对稳一些（ iommu 、PCI 直通方面不存在障碍，这一点经过了较长时间的网上资讯确认，暂时放弃 AMD 系列，对此有不同意见的朋友也欢迎提出来），多方面调查后，目前确认了 AsRock Rack 的 EPC612D8A 主板；
3. CPU 。这个就比较简单了，根据主板直接选择 E5-26XXV4 系列 U，考虑到核心数足够，主频相对不弱，性价比足够的原则，暂时选定了 E5-2680/90V4，暂时还未采购，闲置的小伙伴可以出给我；

另一大块就是 Host 系统选择及 Raid 组合有比较大的不确定：

1. 目前的方案是系统盘 Mirror 和容器盘 Mirror 分离，考虑到都是 SSD RAID1，实际使用中是否需要严格分离呢？如果不的话，这两个应用是不是可以考虑放在一个 pool 里？
2. 由于有多媒体存储、PT 的需求，当然 PT 不算重度，但是多媒体对于性能的偏好要求并不高，目前打算使用 MergerFS+SnapRaid 的类 Unraid 方式来组合存储多媒体存档文件、而 PT 和重要文档文件采用大容量 HDD 组 mirror 或 Raidz1 使用，这样做是否合理？
3. 是否能将 Raidz1 放在 MergerFS 的 pool 中？也就是多个 Basic 盘+Raidz1/Mirror 作为 MergerFS 的 pool，Snapraid 对这个整体进行运作，该参考方案来自于linuxServer.io，各位对这种 RAID 堆叠的方案有什么看法呢？
4. 根据以上的选择，如果采用 MergerFS 和 ZFS 的混合方案，个人倾向于选择 Ubuntu，如果是纯 ZFS 方案，个人可能就会选择 Proxmox，另外的 Truenas Scale 版本正在官网，由于目前仍然是 alpha 状态，有些打鼓，各位有在实际使用中的么？ 欢迎提出建议和宝贵意见。