家庭工作NAS 组装全程（上）

pelen9988 · 发表于 2013-4-14 12:37

数据安全这玩意太让人揪心最近看了不少资料决定把自己的NAS 改造一下

看了不少资料，为了性能和稳定，还是决定使用较为安全的 FREENAS+ZFS文件系统并且加入 L2RC 和ZIL 设备进一步提升性能
目前是这样

主机 HP N40L(和浴室大大的一样

)

硬盘：3T 希捷X 4  做RAID-Z1 保证数据初步安全
         4T X1 独立创建一个tank 用RSYNC 同步重要数据集内容做灾备  每周备份
         8G eUSB 工控 SLC SSD 做启动盘直接插在主板上
         16G SLC SATA 工控级 SSD X2 做镜像作为ZIL 独立意向日志设备
         128G 浦科特 M3S SSD X1 做L2RC 读取缓存设备
         1000G 2.5寸笔记本硬盘做PT下载盘

这样组成了一个由 10盘组成的 NAS 硬盘系统  其中 1个 L2RC设备 2个ZIL设备

内存：现代 DDR2 1333 8G ECC X2 共计 16G
（ZFS文件系统拥有非常强悍的性能，但是非常吃内存，建议配置为1T/G）

扩展卡：Promise SuperTrak EX4350 4口SATA 扩展卡（在纠结要不要换DELL H310 走SATA6 GB）
网卡：集成BCM千兆 +PCI-E 1X BCM千兆网卡一张做链路聚合（链路聚合部分做二期工程吧交换机实在选不好）

并且USB LCD 矩阵显示屏可以实时显示NAS工作状态。（不是温度监控，是工作状态和警报）

系统介绍：采用了ZFS文件系统的RAID-Z1 基本保证了数据的安全性。关于ZFS的特性网上很多。并且加入了ZIL独立意图日志设备和L2RC 极大的提升了随机小文件的写入和读取性能
            关于ZIL独立意图日志设备其实可以这样解释  这个设备相当于一个日志设备比如你写入随机数据的时候为什么会慢，是因为把东西写入硬盘的时候要做狠多的”标记“ 来让系统知道那个地方的数据到底是什么东西，而随机写入慢也就是因为写那个”标记“需要大量的IOPS ，ZIL设备就是让这些标记信息先写到ZIL设备里去，这样写入随机文件就，对设备来说，就和写入顺序文件没多大区别了。当然这是个大概的解释，实际上的运行制度要复杂的多，只是大概可以这样去理解。

这是一台性能取向的NAS，系统构成类似于SUN的企业级存储系统的缩小版，基本可以跑满聚合后的2Gb的千兆网络，成本也不高，从性能上来说，秒杀QNAP 群晖之类非企业型NAS，是小意思，特别是4K和随机文件性能，在16G内存和ZIL L2RC设备的支持下，性能几乎可以达到企业级应用。适合于映射ISCSI 设备或者工作用，当然存高清的话这样太奢侈了。

基本方案已经列完进入设备采购组装阶段希望一切顺利

补充内容 (2013-4-29 13:37):
2013.4.29

第一阶段试验完成。

现在方案是
希捷2T X4 RAIDZ + INTEL 313 24G SLC 2片做ZIL+INTEL 160G SSD 做CACHE

补充内容 (2013-4-29 13:39):
3T 一片做高清电影播放盘走NFS共享给高清播放器， 320G 2.5  一片做PT下载盘低温节能

1TX2做  raidz盘里的重要数据RSYNC备份。

补充内容 (2013-4-29 13:40):
N40L 整理之后光驱的地方可以塞得下 1片3.5 3片 2.5 散热保持的可以用ORICO的转换架加自己开发位置
固态硬盘直接贴后面

补充内容 (2013-4-29 13:41):
连续开机一晚之后 3T硬盘坏了电机都不转怀疑转换过多电压不稳要跟换电源和高品质转换线

Epic · 发表于 2013-4-14 13:48

楼主不上个图啥的？成品NAS都是卖的软件，要性能肯定是自己组装好。

pelen9988 · 发表于 2013-4-14 14:29

P0wer 发表于 2013-4-14 13:48
楼主不上个图啥的？成品NAS都是卖的软件，要性能肯定是自己组装好。

还在采购呢内存和SSD 还没到手组装的时候再上图哈

jewelz · 发表于 2013-4-17 23:34

上测试图上bsd磁盘配置表上组容灾配置指南

merlinhsu · 发表于 2013-4-18 16:41

LZ 8G SLC 做系统盘这么奢侈？实际要用到多少？
另外到时候上图上教程吧关注了。。

geekpi · 发表于 2013-4-18 18:12

本帖最后由 geekpi 于 2013-4-20 10:14 编辑

dell H310有bug，不要用来做HBA扩展，官方工程师确认

http://www.dell.com/Learn/us/en/ ... mp;s=biz&cs=555

SAS2008是最佳的HBA芯片，刷IT模式，IBM 1015M/LSI 9240-8i 即可，兼容性也好。dell H200也行，就是可能要屏蔽5,6针脚
一步到位
硬盘不要一次买4块，最好分批次购买，一次安装。

内存16G的情况下，按ZFS推荐配置应该可以支持 (16-8)/1 = 8 TB容量的整列，你的9TB没什么扩展空间了，所以我觉得N40L内存扩展太少，并不太适合注重性能的用户使用ZFS。不过可以用个3-4年之后再迁移到新平台。

还有iSCSI方面freebsd不如solaris性能稳定，可以考虑用一个16-32G的小硬盘装openIndiana + Napp-it，共享方面功能和freenas差不多，就是少很多扩展工具而已。
当然熟悉freebsd/freenas也可以不在乎这点，影响不大

最后说samba/CIFS共享是个悲剧，只看单线程性能，atom 1.6G 最高只能跑到70MB/s
避免这点尽量用iscsi+NFS吧

其实可以考虑Apu A85X 平台啊，带8 sata3， 1 L2ARC + 2raid1 ZIL + 4盘 raidZ1 + 1 backup，内存可以扩很大，cpu又是高频，待机功耗也高不了多少。

gogosos · 发表于 2013-4-21 13:15

这个好，坐等楼主上图，可以借鉴一下。

yanleiberg · 发表于 2013-4-23 14:57

一般家用这个性能太高了吧，不过很期待楼主的实装经验。似乎这个不支持3T硬盘？还有一共八个3.5寸的硬盘这个机箱放不下吧？

痞子马甲1 · 发表于 2013-4-28 18:03

好高级的样子

dkman · 发表于 2013-5-2 00:43

LZ是否需要改造电源?这个用法貌似电源不够啊

gogosos · 发表于 2013-5-4 17:30

没上图，不过觉得很强大的样子。标记一下，以后回来看看。

cio · 发表于 2013-5-11 22:58

来张图片啊

xaon · 发表于 2013-5-12 19:14

最近正在思考怎么弄个NAS，楼主上几张图片啊

pnlaochen · 发表于 2013-5-14 15:56

提示: 作者被禁止或删除内容自动屏蔽

卜嘎 · 发表于 2013-7-26 14:53

不知道楼主说什么好像很强大的样子。

cio · 发表于 2013-7-28 23:45

无图无真相啊

javac · 发表于 2013-7-29 14:42

本帖最后由 javac 于 2013-7-29 14:51 编辑

有这个投资也不缺买块好点的阵列卡的钱！

ZFS的优点是在管理超大容量的存储吧，感觉就性能来说目前还是ext4最好，如果主要存放大文件，如视频，xfs也不错？

链路聚合如果交换机支持可以选lacp模式，最普通无法配置的交换机可以选择不需要交换机支持的模式。

LZ能不能上个系统逻辑图？

liaobot · 发表于 2013-7-29 20:25

建议楼主把花费也贴出来，各种费用

家庭工作NAS 组装全程 （上）

相关帖子

家庭工作NAS 组装全程（上）