光纤 HBA 卡自建存储，有哪些软件和系统值得推荐？

你的卡是 SAN 模式还是以太网，后者的话你又没说是什么配置。

@billccn 卡是 SAN 模式，FC-SAN 光纤卡

SAN 模式的话你储存的分布和冗余一般是在 SAN 内部完成的，这样你用 Ceph 和 ZFS 等基于软件的储存方案好像没什么意思。具体来说：

ceph 主要是基于(IP)网络的分布式储存，是利用很多不冗余的电脑和储存实现一个冗余的储存系统。类似于虚拟一个可 Scale 到数据中心级别的 SAN 。你要是有 SAN 了，就不需要虚拟一个。

zfs 的主要卖点是集成了 RAID 和 check sum 两种数据冗余技术，并通过复杂的缓存实现高性能。但是 SAN 通常是通过硬件实现 RAID 的，你把硬件 RAID 关掉用 ZFS 除了增加 CPU 负担以外延迟也比较高。

你现在除了 SAN 卡还有什么硬件呢？我现在觉得你问这个问题是你还没有规划好你想怎么搞储存是不是？

@billccn 目前是没想好怎么搞，但是又想搞一套基于 x86 或者 arm 架构的存储方案出来，实现这个存储可以通过 FC HBA 卡直接被 win Linux 等系统直接读取，而且可以在 2-3 台 san 存储直接随意切换；想来想去感觉走在超融合 v-san 上去了

@lengrongec 当前分布式存储都是基于 IP 网络，FC-SAN 和匹配的 HBA 卡和 FC 交换机只能配置独立存储（传统的磁盘柜模式）。也就是只能选 ZFS 的方案

是 fiber channel 吧
不是 fiber 吧

@waringid ZFS 好使么

你还没有买盘柜和 FC 交换机的话建议思考一下你是想尝试软件 RAID 还是硬件，因为很多 FC HBA 是可以刷成以太网模式用。另外你的目的是什么呢？自组 NAS 还是学习企业储存方案？

@lengrongec ZFS 文件系统肯定是没问题的，存储最大的要求是稳定（硬件和相关配件的稳定也是基础要求）。如果使用普通的机架式服务器可以考虑 truenas 系统（需要稳定的考虑 freebsd 的版本，但需要注意硬件和系统的匹配）

@billccn 还有这个道道？

ceph 性能低 维护复杂 truenas &ZFS 更新有坑 例如存储的视频文件 会丢帧