做存储服务器

做存储服务器这件事，说大是基础设施，说小就是“选对硬件、装好软件、挂上磁盘、配好网络”。无论你是给公司搭文件服务器、视频存储池，还是自己组一台 NAS，本质都是在回答：数据放哪儿、怎么保证不丢、访问要有多快。下面从硬件、软件、云和物理机的选择、预算这几个角度，把“做存储服务器”讲清楚。

一、先搞清楚你要存什么

别急着买机器，想清楚三个问题：

• 数据量有多大？ 几百 GB 还是上百 TB？
• 读写模式是什么？ 大文件顺序读写（视频）还是小文件随机读写（数据库）？
• 可靠性要求有多高？ 能接受丢一天数据，还是必须即时冗余？

这三者直接决定你用单机还是集群，选机械盘还是固态盘，上 RAID 卡还是靠软件冗余。

二、物理服务器做存储：自己动手，丰俭由人

物理服务器 的意义在于：所有硬件资源你说了算，没有虚拟化开销，磁盘 I/O 直奔硬件。

1. 机器怎么选

做存储的服务器，跟普通计算型服务器侧重点不同：

• 多盘位优先：存储服务器看的是盘位和背板带宽，2U 12 盘位是常见形态，高密度可以做到 24/36 盘位。
• CPU 不需要顶配：纯文件存储对 CPU 要求不高，4–8 核主流至强足够；但如果跑 ZFS、Ceph 等，CPU 和内存预算要加上去。
• 内存要大：文件系统缓存极吃内存。ZFS 建议 1GB 内存对应 1TB 存储；不跑 ZFS，用 Linux MD RAID + XFS，最低也得 16GB 起。
• 网卡别省：千兆已经不够看，起步双口万兆，做 iSCSI 或分布式存储甚至需要 25GbE 以上。

如果不知道买什么机型，戴尔 R730xd/R740xd、惠普 DL380 Gen10、超微的存储系列都是成熟选项；二手市场也有很多拆机洋垃圾，性价比极高，但售后和稳定性要自己扛。

2. 磁盘规划

系统盘 2 块 SSD 做 RAID1，装系统；数据盘 按预算选：

• 大容量机械盘：做冷数据或备份库，8TB–18TB 企业级 SATA 盘，支持 7×24 运行。
• SSD：做热数据、数据库、虚拟机存储或缓存层（如 bcache、L2ARC）。
• NVMe：做元数据盘或专属高性能池，尤其在 Ceph 里做 WAL/DB 盘效果明显。

RAID 选择上：

• 硬件 RAID 卡简单直接，RAID5/6 是常见配置，但重建时间久，且一次坏多盘风险不低。
• 越来越多人倾向 软 RAID + 文件系统自带冗余：比如用 ZFS 的 RAID-Z、Btrfs 的 RAID1/10、Ceph 的纠删码，好处是不绑死特定 RAID 卡，坏了卡也能恢复数据。

三、软件方案：从 NAS 到分布式

最简单的是搭个 NAS 服务器：

• TrueNAS（原 FreeNAS）：基于 ZFS，Web 管理，支持 SMB/NFS/iSCSI，插件丰富，适合中大型企业或发烧友。
• OpenMediaVault：基于 Debian，轻量，适合家用或小办公室。
• 纯 Linux + Samba/NFS：最灵活，但全命令行管理，适合有运维能力的场景。

如果需要横向扩展，就要上分布式存储：

• Ceph：开源分布式存储标杆，同时提供对象存储（RGW）、块存储（RBD）、文件系统（CephFS）。硬件需求较高，但扩展性极强。
• MinIO：高性能对象存储，用 KV 模式存数据，适合存图片、视频、备份等非结构化数据。
• GlusterFS：适合文件共享，部署简单，但社区活跃度下降，逐渐被 Ceph 取代。

四、云服务器做存储：要不要上云？

云服务器 的优势是开箱即用、弹性扩展、异地容灾，缺点是流量费和长期租金不便宜。

常见组合：

• 云主机挂云盘：比如阿里云 ECS 挂高效云盘/SSD 云盘，起步简单，但高性能云盘每 GB 单价和 IOPS 需要精算。
• 对象存储：阿里 OSS、AWS S3 等，单价极低，适合海量静态文件，但访问延迟比块存储高。
• 云 NAS：如阿里 NAS、AWS EFS，多台云主机共享文件系统，按量付费，适合弹性业务。

物理机和云服务器的成本对比很多人关心：

• 短期项目、流量波动大的，用云按需付费更划算。
• 长期稳定跑存储、数据量几十 TB 以上的，租用或托管物理服务器的综合成本更低。一台 12 盘位物理服务器，满配 8TB 盘，加上托管和带宽，一年费用可能比同存储容量的高性能云盘便宜 30%–50%。
• 物理服务器一年费用取决于配置和机房：低配二手几千元，企业级全新数万元，托管费另算，这种价差直接决定选云还是选物理。

五、数据安全：备份才是真存储

存储服务器做完只是第一步，必须有备份。

• 3-2-1 规则：3 份拷贝，2 种存储介质，1 个异地副本。
• 可以用 rsync、BorgBackup 或 Duplicati 做增量备份。
• 商业方案：Veeam 备份物理机/虚拟机，然后支持备份上云。
• 物理服务器怎么迁移：最简单的，新老机器都装同样存储软件，通过网络同步数据；虚拟机可以直接 vMotion 在线迁移。

六、动手清单：从零搭一台 TrueNAS 存储

1. 硬件准备：一台多盘位服务器，插满企业盘，系统盘两块 SSD RAID1。
2. 安装 TrueNAS Scale（Linux 内核，对硬件兼容好，支持 Docker 和 KVM）。
3. 创建存储池：选 RAID-Z2，允许任意两块盘坏掉。
4. 创建数据集，设置压缩 lz4、同步写策略、快照任务。
5. 开启服务：SMB 给 Windows 用，NFS 给 Linux，iSCSI 给虚拟机。
6. 创建用户和权限，绑定目录，限制访问 IP。
7. 设置自检和邮件报警，让系统在磁盘故障前通知你。

做完这些，你就得到了一个跑着 ZFS 的存储服务器，数据冗余、快照、压缩、服务共享全齐。

做存储服务器，说穿了就是硬件选盘位和网卡，软件选文件系统和冗余方式，再配上靠谱备份。物理机自建性能可控，云上做存储弹性方便，重点看你的数据规模和团队运维能力。与其纠结“物理服务器多少钱一台”，不如先算清楚你需要多大容量、容忍多少丢失、承受多大带宽，预算自然就浮出水面了。