磁盘阵列存储，电源连接注意

Mufasa · 发表于 2014-8-12 09:56

上周末对磁盘阵列服务器的电源进行了升级，
但是出现了一些问题：

因为是自制模组电源，开始为了美观，使用了定制的模组线：

安装完毕后，磁盘阵列的一个盘显示离线。
经过反复排查，是定制线的其中一个插头接触不好。
试图修复，但因为磁盘阵列中另外一个盘出现坏道。
最终导致阵列整体离线。

只能强制阵列上线，拷出数据。
拆掉那个坏的盘，重新买新盘，删除阵列重新建。

新盘到位后，采用了更加传统的接线方式：

5根线独立供应5个盘，不再共享。

5根线都是独立连接到模组板上的，这样就可靠多了。。。。

因为主板巨大，背线不可能，全部走正面。
安装完毕后，重建阵列，恢复正常。

整机图片如下：

Mufasa · 发表于 2014-8-12 10:05

补充一点：关于 TLER

西部数据的限时错误校正(Time Limited Error Recovery , TLER) 技术。
1、因为RAID控制器（阵列卡）会自动卸载掉超过8秒没有任何响应的硬盘并报告错误，然后开始进入阵列的错误校正过程，有可能导致阵列系统停掉以及冗长的RAID卷恢复动作。
2、8秒的阈值是广泛存在于ATA/SCSI RAID适配卡设计内的工业标准。
3、打开有TLER的硬盘在检测到本次错误校正无法在7秒钟之内完成的话，会在每个第7秒的时刻向RAID控制器（阵列卡）发出信息宣示它的存在，RAID控制器就能够在8秒的阈值检测到这个物理驱动器仍然在线，从而不会将其卸载掉，RAID卷也就不会损坏，系统停掉以及冗长的RAID卷恢复动作也就不会发生。

因为我这台存储机使用的是西数的绿盘，不支持TLER
先前因为导线接触不良，导致一个盘离线，Raid 5阵列发生N-1故障。
用扎带捆好以后，离线的盘重新上线，开始自动重建。
在阵列重建过程中，另一个盘出现坏道，并且失去响应时间过长，
阵列控制器认为那个盘已经损坏，进入离线状态。
导致RAID 5阵列发生N-2故障，阵列整体离线。

过后只能强制两个盘上线，会提示不保证数据完整性。
但我估计坏道出现在后面磁盘内圈空白区域，就强制执行。

然后数据拷出，基本无问题。
换掉有坏道的硬盘，重新连接了导线，根除故障。
再把数据拷回去。。。。

因为有异地备份，这次故障不会损失数据。

但是提醒各位：
1. 磁盘阵列的导线要注意，千万要连接稳固
2. 最好选用支持 TLER 的存储专用硬盘

Mufasa · 发表于 2014-8-12 10:16

本来想美观一些，一股线串完5个盘。

结果弄出一大堆麻烦。

以后还是以可靠为第一目标，无视美观。。。。

暴疯狂笑 · 发表于 2014-8-12 10:16

楼主的这个例子说明想依靠RAID降低硬盘门槛也是不可取的。

经过论坛这次教训，加上以前亲手碰到的惨案，个人现在倾向容量换安全，RAID1，RAID1，RAID1。。。

Mufasa · 发表于 2014-8-12 10:24

异地备份才是王道。

庆幸的是，在这次故障之前两个月，异地备份2号机完成升级。
这个阵列里的所有数据都备份到了那台机器里。

虽然崩了一个8TB的阵列，但没有损失。。。。

nighttob · 发表于 2014-8-12 11:56

狮子王的第一张图是线的两头都接在模组板上了么？
如果是的话，我还真没想到过这种接法。

一对一的接，太占用空间。普通硬盘，一串四我觉得还是可以的。
但不管怎么弄，背线都是不可能的了……
我也自己改过线，结果也是悲剧。

这还是原来的771双路板子吧。
老480还得继续费电？

我这边也是两套存储了。
日常用RAID，每个月往单盘的离线里备份一回。这样就算被雷劈了也不会全灭，异地就办不到了……

Mufasa · 发表于 2014-8-12 12:38

这个是双路 L5639

显卡是 GTX480

整机满载的功耗非常高，之前的650W电源风扇噪音很大。
现在换了个大电源，立刻就安静了。

只是换的过程比较折腾。。。。。。

wxlg1117 · 发表于 2014-8-12 17:42

本帖最后由 wxlg1117 于 2014-8-12 17:47 编辑

非常不推荐这种穿刺线...

zjchanger · 发表于 2014-8-12 18:57

磁盘阵列存储服务器上GTX480，这是什么节奏？？

世纪冰雷 · 发表于 2014-8-12 21:16

做阵列真的要很小心。。

Mufasa · 发表于 2014-8-12 23:08

插GTX480 是因为曾经有计划做 L5639 和 i7 的游戏性能对比测试。

后来简单测了两个游戏发现根本不在一个层面，就不管它了。。。。
12核心低频根本不是4核心高频的对手，差距非常大。

再后来这个机器成为了存储实验平台，显卡也没变化。

ryoma1836 · 发表于 2014-8-12 23:26

我也怕了，以后硬盘线做模组线也分开，现在一条拖一个SSD和四个HDD。。

磊子1986 · 发表于 2014-8-13 08:06

我的机箱硬盘装不下，买了个o家的光驱位硬盘架。每次启动完，发现都在重建。最后发现是o家硬盘盒供电有问题。

wuxz1 · 发表于 2014-8-18 12:50

我也自己搭了一个8盘位的NAS，用的是G大的DC-ATX窄版300W电源，
SATA电源线是自己做的，用了18awg的镀银线，一路线上接了4个SATA口，目前暂时用了3个月正常无错。
系统用的是Napp-it all in one组了ZFS raidz2，硬盘是西数红盘，NASware 2.0的盘。
不知道长期用会不会出现问题，现在设置了定期检查硬盘信息。

noskin · 发表于 2014-8-31 03:40

我也是怕了Raid5,4盘位NAS换成2块组Raid，剩下俩单挂了
西数se系列比红盘还便宜

monsoon0505 · 发表于 2014-9-8 10:34

我觉得这种还是背板吧，比如ds380的背板，2个大D电源供8盘，一堆滤波电容，比较安全

磁盘阵列存储，电源连接注意

本帖子中包含更多资源

评分

相关帖子