我的nas难道如此不堪一击？！

发表于 2018-3-12 12:10

本帖最后由 909648183 于 2018-3-12 12:13 编辑

xudaiqing 发表于 2018-3-12 12:08
硬卡出现和发展起来的最主要原因就是windows软raid（动态卷）实在太差，而且微软花了20年都没把它搞定。
...

存储池就是微软新的阵列解决方案呀，稳定性已经好很多了，配合refs文件系统，基本上各种硬卡的功能都通过软件实现或者弥补了

再说家用环境下，硬卡无电池或者电池挂了还为了性能开write back的也很多

Mufasa · 发表于 2018-3-12 12:57

909648183 发表于 2018-3-12 12:10
存储池就是微软新的阵列解决方案呀，稳定性已经好很多了，配合refs文件系统，基本上各种硬卡的功能都通过 ...

我就是强开 Write Back 的。。。。

冷数据备份服务器，不存在写入问题，备份过程中断电，等恢复以后删除再拷就是。

开Write Back对于写入速度的提升非常明显，可以大幅减少备份时间。

xudaiqing · 发表于 2018-3-12 13:10

909648183 发表于 2018-3-12 12:03
win存储池实质上是类似zfs，而不是常规的raid

排除系统因素的话，理论上比常规的软raid靠谱，但同时也导 ...

奇偶校验性能差是因为存储池用的还是类似硬raid的那套结构，导致无论什么情况必须确认前一个块完全写入完成后才能写入下一个块，结果就是没有镜像空间做缓存的时候写入奇差。其他比如zfs／btrfs并没有这样的问题。
zfs有名的是raidz2，对应的是raid6加checksum应对bit rot，存储池在这上面什么都没有。而且我认为checksum的作用被夸大了，硬盘内部已经做了Hamming code。

xudaiqing · 发表于 2018-3-12 13:29

本帖最后由 xudaiqing 于 2018-3-12 13:32 编辑

909648183 发表于 2018-3-12 12:10
存储池就是微软新的阵列解决方案呀，稳定性已经好很多了，配合refs文件系统，基本上各种硬卡的功能都通过 ...

你觉得七彩虹推出一个标称各种好的新系列SSD之后你需要多久相信这个系列可以放心买？而windows动态卷有20年黑历史。
然后再看看storage space direct在正式发布后又回炉重造了的现实。再想想refs已经回炉过一遍（从1.x（2012）到3.x（2016））。你还对它有信心吗？

eterfinity · 发表于 2018-3-12 13:51

909648183 发表于 2018-3-12 12:03
win存储池实质上是类似zfs，而不是常规的raid

排除系统因素的话，理论上比常规的软raid靠谱，但同时也导 ...

linux的mdraid 从2011年的某个版本好像是3.1内核开始有坏快list功能了
以前没有坏块list功能时，读取超时或者写入遇到坏快（物理或者逻辑）引发超时后，会踢掉磁盘。
有坏快list功能时，会记录并维护256个坏快，hold不住了才会踢盘。
那么问题来了，本该早就更换的盘没有更换而是继续服役
如果是raid5 ，那么每个盘上会有各自不处于同一物理位置的坏快，即所谓的optimal with multi badblock ，极易引发double fault（原因可能是一个盘机械故障，另一个盘坏道多到与好盘的坏道对穿了）。

当然用linux的也有人每天下班前会获取一份健康度，自己去分析，不过大多数人不会这么干。
用windows存储池的话，某一向镜像超时会换个设备写，三向镜像需要五个设备就这么来的。

xudaiqing · 发表于 2018-3-12 14:08

本帖最后由 xudaiqing 于 2018-3-12 14:09 编辑

eterfinity 发表于 2018-3-12 13:51
linux的mdraid 从2011年的某个版本好像是3.1内核开始有坏快list功能了
以前没有坏块list功能时，读取 ...

每天分析是什么年代的事了。现在实时监测（zabbix／nagios）是标配。
某一向镜像超时会换个设备写没听说过，有链接吗？

eterfinity · 发表于 2018-3-12 14:17

xudaiqing 发表于 2018-3-12 14:08
每天分析是什么年代的事了。现在实时监测（zabbix／nagios）是标配。
某一向镜像超时会换个设备写没听说过 ...

我遇到的怎么都是一丢就不管了的就没看到有人上nagios 我的nagios教程根本就没有送出给客户过。

xudaiqing · 发表于 2018-3-12 14:38

eterfinity 发表于 2018-3-12 14:17
我遇到的怎么都是一丢就不管了的就没看到有人上nagios 我的nagios教程根本就没有送出给客户过。
...

因为有硬raid啊，只要稍微花一点钱就可以获得集成的管理／监测方案。除非企业环境大规模部署否则肯定划不来吧。如果是大规模部署怎么想raid这种基础操作都不可能外包吧。

icyboy · 发表于 2018-3-12 21:49

Mufasa 发表于 2018-3-12 12:57
我就是强开 Write Back 的。。。。

冷数据备份服务器，不存在写入问题，备份过程中断电，等恢复以后删除 ...

我也给我的M5210上了个2G缓存加电池，写入确实快很多了，CC KEY还在路上！

红色狂想 · 发表于 2018-3-12 22:20

尊称发表于 2018-3-12 01:00
维护的负担本身比方案并不具有更少的权重。你只说了方案，对海量来说，问题已经转变。

过去没有感受，认 ...

的确，我说的也只是家庭数据中心这种应用方案，谈不上海量，也就工作数据、电影、音乐、视频和照片等内容，这种情况定期冷备份并不难做到。还有你说的冷备份有1T就足够了。这恐怕是仅备份工作数据吧

红色狂想 · 发表于 2018-3-12 22:25

909648183 发表于 2018-3-12 08:37
存储池可以用vhd搞，所以可以分别建2个2块hdd组的存储池，均全部为镜像模式，然后分别建vhd占满空间，再 ...

你说这逻辑好复杂，绝对没有必要了，有这功夫我直接上硬卡了，其实windows的存储池优势就在简单易用上，搞复杂了就没意义了。

xudaiqing · 发表于 2018-3-13 08:59

本帖最后由 xudaiqing 于 2018-3-13 09:01 编辑

红色狂想发表于 2018-3-12 22:25
你说这逻辑好复杂，绝对没有必要了，有这功夫我直接上硬卡了，其实windows的存储池优势就在简单易用上， ...

我觉得存储池算不上简单易用，硬raid和nas（群晖、qnap）才是。比如给存储池做个邮件报警。
我认为存储池关键在不花钱（不算windows授权）和简单的创建gui。所以我觉得拿来存不是那么重要的东西不错。

杰迪武士 · 发表于 2018-3-13 10:54

存储池奇偶校验的性能太差劲了，折腾了半天还是用了FreeNAS的Raid-Z

发表于 2018-3-13 19:50

本帖最后由 909648183 于 2018-3-13 20:28 编辑

杰迪武士发表于 2018-3-13 10:54
存储池奇偶校验的性能太差劲了，折腾了半天还是用了FreeNAS的Raid-Z

存储池奇偶校验配合refs其实和raidz类似，都是COW，checksum，以及错误自动修复等特性，也因此没有buff的时候性能很难看，只是zfs需要大内存，也可以用ssd作为log来优化性能，存储池则使用分层存储或者2块ssd作为journal来解决性能问题。

发表于 2018-3-13 20:24

本帖最后由 909648183 于 2018-3-13 20:31 编辑

xudaiqing 发表于 2018-3-12 13:10
奇偶校验性能差是因为存储池用的还是类似硬raid的那套结构，导致无论什么情况必须确认前一个块完全写入完 ...

存储池奇偶校验配合refs的时候，真的很像raidz，都是copy on write，虚拟硬盘以及快照克隆应用优化，都有checksum以及自动修复功能，只是性能优化方案不同。

raidz需要大内存，也可以使用高速存储作为log优化性能；存储池refs则有独家的分层存储方案（镜像空间与奇偶校验空间自动转换），也可以使用2块ssd作为日志优化性能。

存储池最大的优点应该是其灵活性，存储池内部特殊的数据分布方式导致其极其灵活的应用场景，配置以及扩容非常方便。比如存储池中可以将1+1+2 容量组合的硬盘配置为容量2的双向镜像空间，扩容时可以不降级已有的冗余空间（可以先搬运数据，安全删除硬盘后再加新硬盘），对新加硬盘的也没什么特殊要求。当然肯定也有人对这种不对用户透明的管理策略不满就是了。

zfs作为老牌的企业存储方案，稳定性和性能当然是没得说的，但存储池的设计也是很有亮点的

红色狂想 · 发表于 2018-3-14 23:59

xudaiqing 发表于 2018-3-13 08:59
我觉得存储池算不上简单易用，硬raid和nas（群晖、qnap）才是。比如给存储池做个邮件报警。
我认为存储池 ...

那你觉得存储池和intel的软阵列哪个更可靠？

xudaiqing · 发表于 2018-3-15 00:17

红色狂想发表于 2018-3-14 23:59
那你觉得存储池和intel的软阵列哪个更可靠？

我觉得正常人不会考虑intel软阵列,而会用这些https://www.intel.com/content/ww ... id-controllers.html。
如果是比差的话。你觉得存储池和raid硬盘盒哪个更可靠？( https://www.ebay.com/itm/StarTec ... :g:3dUAAOSwKOJYJj11 )

红色狂想 · 发表于 2018-3-15 17:05

xudaiqing 发表于 2018-3-15 00:17
我觉得正常人不会考虑intel软阵列,而会用这些https://www.intel.com/content/ww ... id-controllers.html ...

这个Intel® RAID是板载原生的阵列功能吗，需要CPU和芯片组支持才行，那这和使用LSI 9260-8i硬卡不是差不多吗？

xudaiqing · 发表于 2018-3-15 20:18

本帖最后由 xudaiqing 于 2018-3-15 20:30 编辑

红色狂想发表于 2018-3-15 17:05
这个Intel® RAID是板载原生的阵列功能吗，需要CPU和芯片组支持才行，那这和使用LSI 9260-8i硬卡不是差不 ...

raid方案是以什么形式提供的对可靠与否并不重要。lsi/adaptec的raid卡以及它们的衍生方案被长期的应用证实是可靠的，同样的还有mdraid、EMC（SAN）等等。

微软的动态卷被长期的应用证实是不可靠的。现在微软给它改了名、改了UI、也许在底层也做了很大变动，但是它改了之后还非常新，同时还有不少失败的案例，也许这只是因为大家对它还不够了解，也许它确实是可靠的，但是它现在的可靠性最多算个“可能可靠”。我想我不会拿我的重要数据去赌它是可靠的。

从技术角度讲intel raid实际是这里面最“硬”的，raid卡实质上就是个安装在pci-e插槽上的电脑，通过跑在pci-e总线上的scsi指令集和外界交互，它有自己的操作系统、内存、硬盘（固件），有类似与mdraid和存储池的软件解决方案来实现raid，还有一些可以帮助它更好的实现这一目的加速指令集或外设。好处是这是一个完全受raid制造商控制的系统。

尊称 · 发表于 2018-3-19 12:05

nighttob 发表于 2018-3-8 06:49
OCE/RLM是RAID操作中最接近作死的

想知道出了什么问题看日志呗

Online Capacity Expansion (OCE) and RAID-Level Migration (RLM)

每次看到都忘了什么意思，这次标注出来省的再忘