PCEVA,PC绝对领域,探寻真正的电脑知识
打印 上一主题 下一主题
开启左侧

内存容量对ZFS文件重要么?

[复制链接]
跳转到指定楼层
1#
点击数:10330|回复数:39
菜鸟一个,组一台存档类型服务器,看了些FreeNAS等支持ZFS文件系统的介绍,很多概念不完全理解,目前有如下问题:1,不要求手机端APP,定期把常开的群晖数据同步到存档服务器,把隔离网环境中的工作数据使用移动硬盘的方式导入存档服务器;
2.自己照片很少,主要是小孩的照片、视频。问题是于很多此类文件分散存在家人的手机中,使用各自手机上APP将手机照片导入NAS之后存在同样照片、视频有重复的问题,群晖文件的文件去重时使用哪种验证方式?实际使用效果如何?
3.ZFS文件系统的硬件配置有什么要求:比如开启巡检存储池数据,同样容量存储池巡检完成时间与CPU、内存容量是否有关?它的文件系统去重功能,需要1T数据要求1G内存容量对应1G内存么?

4.在同一阵列卡连接的所有硬盘组RAID-Z,是否有要求硬盘必须全是SAS硬盘或SATA硬盘?不能两种硬盘混用?
5、使用12块硬盘组成一个存储池,使用RAID-Z哪个级别合适?
6.在网上看到些说法是freenas系统下的ZFS最好使用ECC内存以避免出错,这种说法有依据吗?
7.RAIDZ扩容看了一些资料,我的理解是必须增加与原有存储池同等数量、容量的硬盘或者依次替换原有硬盘,尤其对于RAID-Z2/Z3来说更需要消耗更多数量硬盘,比如原来四盘组RAID-Z1,可用容量为3盘;扩容需要4块同等容量的硬盘,并且增加的可用容量仅为3盘,比直接8盘组RAID-Z1可用容量为7盘要多消耗一块硬盘,那直接8盘组RAID-Z2直与前面扩容方案有什么区别?对于家庭用户根据数据量增长遂年购买硬盘的习惯而言实在不友好,更适合企业一次性购买组建。我这样理解正确么?
8.ZFS文件系统组建RAID-Z2,如果硬盘完好,服务器其它硬件比如CPU、9211-8I通道卡、主板等损坏需要更新型号硬件时,原有RAID-Z2数据如何无损接入新硬件平台上?
问题的来源,从硬件上来说,对于我而言巡检存储池数据是首位,文件去重是第二位,如果需要1T数据要求1G内存容量对应1G内存的话,8盘24T的存储池需要8G*4=32G内存,这个组建成本不低,更何况ECC内存价格更高,所以前面帖子里考虑了使用DELL R510二手服务器,在盘位和内存容量上容易满足上面要求,但二手服务器的摆放位置的确是个问题(原想放单位机房,结果机柜深度不够)
2#
copyleft2000  楼主| 发表于 2018-9-2 03:42 | 显示全部楼层
谢谢版主的解答,还是考虑上软件RAID,不过在纯菜鸟进步前,整软RAID一个当试验品,不存重要数据。不实际使用,终究很多东西靠猜。
1.全自动同步前端群晖里的文件,隔离网的文件只能从隔离网拷入移动硬盘,先从自己手动操作开始学起吧。
8.我没说明白,我的意思是打个比方我使用freenas系统安装在U盘上,本身OS和硬盘是正常工作状态,只是由于是二手服务器,因为一些原因,主板等其它配件坏了,找不到同型号配件替换,更换了主板、CPU后,原有RAIDZ陈列是否能完整迁移到新型号配件上(假定网卡型号都与原来不相同,但也是服务器常用网卡)这个问题是看了原来浴室的帖子,原有阵列卡损坏后为了恢复陈列重新买了一块同型号陈列卡才把数据恢复。

问题的来源是看到论坛不少帖子,无论是群晖的SHR、还是RAID5
群晖ds416 NAS突然挂盘.4个3T组SHR.掉2个盘
好无聊啊,发一个raid5多盘错误
上面两种陈列的问题,不是不想用硬RAID,我估计版主所说支持Patrol Read和Consistency Check(我在1楼描述不准确)的阵列卡价格不低,得几千块吧?对于一个新手买这个当入门练手,有些贵了,还是钱的问题,所以考虑使用软RIAD。
3#
copyleft2000  楼主| 发表于 2018-9-5 01:30 | 显示全部楼层
doymll 发表于 2018-9-2 07:01
版主,他跟我一样迷茫,我现在准备用储存池,数据还没拷完,群晖的同步速度 ,哎。减少我对raid不懂的依赖 ...

是迷茫了,没基础就瞎猜了。存储池你用镜像还是?盘位多了不好管理吧?
来自苹果客户端来自苹果客户端
4#
copyleft2000  楼主| 发表于 2018-9-5 01:35 | 显示全部楼层
nighttob 发表于 2018-9-2 09:22
软RAID的阵列信息在OS和硬盘上面,跟你主板网卡啥的没关系
只是提醒你,软RAID如果挂了,很难修复

9260-8i?这张卡支持Patrol Read和Consistency Check吗?dell   h700之类oem能刷回lsi的官方固件吗?阵列卡内存1G和512M写性能差异大吗?
来自苹果客户端来自苹果客户端
5#
copyleft2000  楼主| 发表于 2018-9-5 01:39 | 显示全部楼层
杰迪武士 发表于 2018-9-2 09:53
玩过一些网络和存储,有点相应概念和经验,也试着来回答一下LZ
1、可以用群晖上的备份功能通过网络备份到存 ...

谢谢!隔离网只能用移动硬盘拷入存档服务器。更换硬盘法扩容,每块硬盘花了多长时间?
来自苹果客户端来自苹果客户端
6#
copyleft2000  楼主| 发表于 2018-9-5 01:51 | 显示全部楼层
li2921578 发表于 2018-9-2 12:39
zfs 文件系统跟你的主板 陈列卡 没关联 只要 你的新系统(nas系统)支持zfs   把硬盘移动过去就是了...
硬盘 ...

移动时盘位顺序要原来的一致么?
来自苹果客户端来自苹果客户端
7#
copyleft2000  楼主| 发表于 2018-9-5 01:52 | 显示全部楼层
Mufasa 发表于 2018-9-2 22:02
办公室的FreeNAS是另外一个同事配置的。

他的原话: 必须ECC内存,最小16GB,或者按1TB/1GB内存配置

谢谢狮大,考虑16G起吧。
来自苹果客户端来自苹果客户端
8#
copyleft2000  楼主| 发表于 2018-9-5 01:57 | 显示全部楼层
eterfinity 发表于 2018-9-3 21:08
ECC的问题要分两半来看

一 是 atom 奔腾 赛扬 i3 e3 移动版i5 i7 这类cpu (只讨论支持ECC的cpu,所以没有 ...

考虑1366老平台,RECC内存便宜。只是R510单路才四条内存插口,C2100有9条内存插口。只是14盘的R510带锁前面板能用么?放家里得防小朋友乱动。C2100没找到是否有带锁前面板。
来自苹果客户端来自苹果客户端
9#
copyleft2000  楼主| 发表于 2018-9-6 23:11 | 显示全部楼层
CatoHT 发表于 2018-9-2 16:10
RAIDZ2还好吧,掉一块盘就换感觉没什么问题。
真的坏3块盘,RAIDZ2和RAID6都没得修啊。
...

几盘位以上建议上RAID-Z3?
10#
copyleft2000  楼主| 发表于 2018-9-6 23:13 | 显示全部楼层
eterfinity 发表于 2018-9-5 14:35
510 那个声音  你要有心理准备啊

8盘以上的,哪款声音小些?
11#
copyleft2000  楼主| 发表于 2018-9-25 18:15 | 显示全部楼层
inSeek 发表于 2018-9-24 22:14
我有2台FreeNAS机器,一台裸机,一台ESXI内。都是24*7的机器。
经验来说,
尽量别二手硬件和老硬件,特别是 ...

谢谢分享,也考虑过全新硬件,配置如下:1机箱+350W海韵电源:万由810A的机箱,可以8盘热插拔,350W电源的余量不少。
2主板:主板用永擎的MATX主板,双千兆,主板芯片组自带8SATA,四条DIMM,最大支持64GB ECC内存,
3.内存:单条16G起,如果目前8盘4T组RAID-Z2,存储空间在24T左右,如果以后换硬盘为10T硬盘,存储空间预计为60T,大约需要64G内存,四条DIMM的话也就是每条16G,所以一开始上单条16G内存。
CPU:要求不高,400多块的够用了吧?

只是这样一来,不算硬盘光主机就不低于4000块了,


您需要登录后才可以回帖 登录 | 注册

本版积分规则

快速回复 返回顶部