PCEVA,PC绝对领域,探寻真正的电脑知识

标题: 实用入门级RAID卡-HighPoint RocketRAID 2720使用心得 [打印本页]
作者: nighttob    时间: 2012-8-22 13:16
标题: 实用入门级RAID卡-HighPoint RocketRAID 2720使用心得
本帖最后由 nighttob 于 2012-8-22 13:30 编辑

早就预告过会写一篇我现在用的RAID卡的测试文了，原本是想等8块盘买全再写的，但是这时间就没准了，所以趁现在有空就先写了吧。
本文不是评测，因为没那条件（没人借我8块硬盘，我也不能把现有硬盘的数据清掉……），所以只能说是使用这块RAID卡半年多来的一些经验和心得。

HighPoint RocketRAID 2720（以下简称HPT RR2720），是一款定位入门级的SAS RAID/HBA，采用单芯片Marvell-88SE9485作为主控，无缓存，PCI-E2.0 x8总线接口，支持RAID0/1/5/6/10/50，有两个SFF-8087 mini SAS接口，一共可以连接8块内置硬盘（SAS及SATA，可混插）。
正面

背面

可以看到正面被散热片覆盖的就是Marvell-88SE9485主控，右侧的两个大接口就是SFF-8087 mini SAS接口，通过一分四数据线可以转成4个SAS或SATA接口。左上的两排插针分别是一组I2C接口和两组LED状态指示灯接口，旁边的圆柱体是蜂鸣器。


这块RAID卡是去年12月买的，价格是￥750，现在依然是￥750。买的主要目的是提高存储可靠性，因为之前两年中相继挂了3块大容量硬盘，两块是固件门，一块是摔坏的。再一个就是想动手实践一下RAID5。因为去年这时候硬盘价格很便宜，2T硬盘不到￥500，所以那时候已经有了3块2T和2块1.5T，都是单独挂接在主板和外置硬盘盒里。了解RAID的都知道，虽然RAID0可以提供N倍读写和容量，但是其中一块挂掉，所有数据都要遭殃，再加上这时候我已经认识到新硬盘的不可靠性，所以宁愿单着也不去组RAID0。但是随着日后硬盘不断增加，主板的接口也会不够用，外置硬盘盒总归不是那么好用，所以就准备买一个支持RAID5的阵列卡。

当时考虑过几个方案。首先是主板RAID5，经过了解（我有个同学是在服务器部门工作）得知主板做RAID5就纯粹一悲剧，写入性能不及单块硬盘，同时不能提供像样的RAID5冗余保护能力，换句话说主板RAID还没硬盘本身可靠，所以这个方案被否决了。然后就是独立的RAID卡，市面上卖的具有RAID功能的卡，大概可以分两类（我自己分的，不准确）。一类就是企业级的RAID/HBA卡，使用PCI-E x4/x8/x16接口，4块硬盘起跳，支持各种RAID级别和功能。还有就是消费级的SATA扩展卡，使用PCI-E x1接口，最多接4块硬盘，绝大部分只提供RAID0/1功能，其余就一概没有了。这两类卡比起来价格差异是很大的，因为我这时候已经有5块硬盘了，而且未来肯定要继续添置，所以消费级的SATA扩展卡，无论是可靠性还是可用性都不能满足要求，因此也被淘汰了。但是有这样一个产品引起了我的主意，Orico csa3655-s5r，同样是PCI-E x1接口，但是提供了5个SATA接口，还有一个SATA接口可以连接到主板提供BOOT支持和带宽协助，并且标称支持RAID5。它的性能如何暂且不论，如果我有5块2T的新盘的话，这个方案也许可行，但我手里的盘是已经写满数据的，不能重新初始化组RAID5，需要有RAID卡支持的在线扩容（OCE）和在线RAID级别迁移（ORLM）才行，所以我邮件询问Orico是否支持OCE和ORLM，他们的回答非常气人，跟我说市面上所有的RAID卡都不支持，然后我就再也不搭理他们了。

然后就只能关注企业级RAID卡了，于是求助于我那个同学，告诉我LSI 9260-8i。我去搜索了下，性能和功能确实不错，但是价格……供IBM的OEM货还￥2000（去年这时候），零售的就更贵了。这时候我也去了解了一些RAID卡相关的知识，当然，面向我自己需要的。我只需要这个RAID卡能提供RAID5级别的冗余保护，因为是作为资料存储盘，所以不需要有多少IOP，只要持续读写性能强过两块盘RAID0就行。LSI 9260-8i性能确实强，但是远超出我的需求，同样价格也是，我的预期是￥800左右（就跟现在的GTX660Ti一样，性能强，性价比也高，但是已经超过我两倍的游戏图形需求，所以肯定不会买）。接近￥800这个价位的只有LSI 9240-8i这样的HBA，但当时这个也是价格过千，而且在了解知识的过程中发现，LSI无缓存的RAID卡，做RAID5同样是个悲剧，也就比主板稍微强点，而且LSI 9240-8i本来就是扩展支持RAID5的，写入性能非常烂，所以LSI方案也只能放弃。

这时候就陷入了一个低不成高不就的不利境界，低端的功能不足，高端的价格太高。也是赶巧了，正好翻一些国外的低端RAID卡评测的时候发现了HighPoint RocketRAID 2680，然后去HighPoint的官网又看到了HPT RR2720。从外观上来看，这两款差不多，主要区别的就是主控和PCI-E接口版本，国内价格相差不到￥100。然后就搜索关于HPT RR2720的评测，基本都是国外的，反正大概能看懂（他们的总结中也常常有“难以置信的好”这样的字眼出现），而且不仅有跟LSI 9240-8i这样的对比，还有RAID0/5/6性能的测试，从国外各种网站的评测来看，HPT RR2720是块相当具有性价比的低端RAID卡，8盘RAID5持续写入有至少4盘RAID0的水平，这对我来说就已经足够了，随后又去HPT官网把说明书载下来看了看，发现功能和设置都不复杂，OCE/ORLM，阵列重建的操作也都很简单明晰，于是就下决心买了。

卡刚到手的时候并没有立即组RAID，因为那时候是硬盘涨的最厉害的时候。本来计划是等希捷新单碟1T的盘上市以后一气买8块，直接自己做一个评测，然后再投入使用，也省得OCE/ORLM了（因为没实践之前并不知道这种操作风险如何，我并不想冒数据丢失的风险）。但是单碟1T的价格比原先两块2T的都高，而且降价趋势不明显，所以新购硬盘的计划就一直被推迟了，计划也变成了扩充2T的型号。终于到今年4月的时候，2T价格降到了￥700以下，我也不愿意再等了，就买了三块，正是开始折腾这块RAID卡。

具体做法就是先把这三块盘做RAID5，然后把原有硬盘的数据复制到做好的RAID5里，之后再把原来的2T盘用OCE扩容进RAID5中。最后的结果是，6块2T的盘，其中5块是同型号（但是产地、固件版本是两种），这5块同型号的做成了RAID5，剩下的一块当作备用盘。因为如果阵列里有盘挂了，虽然此时还是可操作的，但是处于不稳定状态，如果不及时补盘重建，再有盘挂掉整个阵列就完蛋了，不能冒这个风险，所以预留了一块做备用。在这一段时间的使用中，这个决定也被证明是很正确的，上月底07挂的那块盘，就直接用备用盘顶上去了；前天一块盘出逻辑坏道，也是用备用盘替换，之后修复完坏道再替换回来。其实在服务器中，RAID5阵列里也是有一块盘作为热备而存在的，目的就是某块盘挂掉以后立即有盘能够顶上来，最大可能保证阵列安全。不过服务器里的备用盘是热备，即一直通电插在阵列卡上，我这个是冷备，通常离线装在盒子里。因为如果只是电线被碰掉了，或者磁盘偶尔卡顿被阵列卡判为失效，阵列卡就自动让热备盘顶上来（其实是可设置不自动重建的），但实际上硬盘是正常的，这时候就要手动中止重建，再把盘恢复回去，这又是一次重建。表达的可能有点绕，如果能实践一次就会明白了。总之自己当数据仓库使用的话，因为开机的时候人肯定就在附近，所以用冷备也足够了。

这4个月里，一共重建了有10回，其中5次是单块盘掉电导致的重建，4次是换盘重建，还有1次是最开始进行的重建实验。每次重建的时间是6小时左右，替换到备用盘的时候是6个半小时，同型号盘重建是5个半小时，跟盘本身的读写能力有关，备用盘的平均速度要慢约20MB/s。不得不说用了RAID5以后心里踏实不少，不用担心买到地雷盘然后丢数据的灾难了，同时RAID5的连续读写也很可靠，大部分都保持在300MB/s的水平上。因为我不喜欢一块盘分N个区，所以一整个实际8TB容量的分区看上去也很爽，只要内部文件夹布置的合理就没有影响。

扯淡部分到此结束

虽然只有5块盘，大概也能看出这块RAID卡的能力了。
[attach]134437[/attach]
没法测试连续写，不过其实差不多。
[attach]134438[/attach]
只能这么测试连续读写了，330MB/s其实挺不错了。
[attach]134436[/attach]
文件拷贝测试，总归是机械硬盘，这个肯定好看不到哪儿去。

本来还想通过SSD找找RAID卡和主板AHCI的差距的，但是单独一个X25-M看来也找不出什么差距。
[attach]134440[/attach]
这是X25-M接主板上。
[attach]134439[/attach]
这是X25-M接阵列卡上。MB/s那页基本看不出区别，换到iops这边还能看出一些，但是没有经过多次测试，所以也不能做准。

阵列卡的操作就不介绍了，这玩意毕竟是小众产品，如果是跟我有类似需求，想在自己家里弄个数据仓库或者家庭存储服务器的话，HPT RR2720这块卡可以推荐下。如果有兴趣也可以在帖子里交流，这里就只放一张事件记录的截图了。
[attach]134441[/attach]
稍微说明一下，"Array #### rebuilding started/completed"就是阵列重建开始/结束，"Spare disk #### at **** took over "就是热备的盘顶上去了，"Disk #### has been put into spare pool successfully"就是新添加一块盘作为阵列的热备盘，"Disk #### at **** failed"这个就是某块盘失效了（比如盘挂了，掉电了，这里是我自己把数据线拔掉了）同时蜂鸣器会响警报。最后几行可以看到，当有热备盘的时候，阵列里有盘离线，热备盘就会自动顶上去开始阵列重建。

最后提供一点资料，Marvell-88SE9485主控的官方PDF，这也是这块阵列卡低价但是有不俗性能的关键，虽然PDF里并没实际说啥。
[attach]134442[/attach]

再提供一个实用工具的简单介绍，你的硬盘健康哨兵-Hard Disk Sentinel，可以看RAID阵列后每块磁盘SMART状况的，搭配使用效果佳。
作者: neeyuese    时间: 2012-8-22 14:10
这块卡我这也有，不过当IOPS爆到12万的时候（2块SSD RAID 0 跑iometer），卡的我机器都动不了了。。。。
作者: nighttob    时间: 2012-8-22 14:13
neeyuese 发表于 2012-8-22 14:10
这块卡我这也有，不过当IOPS爆到12万的时候（2块SSD RAID 0 跑iometer），卡的我机器都动不了了。。。。 ...

嗯，我看Marvell主控介绍的时候上面也写了iops有限，而且对这个没缓存的卡也不能要求太高。
据说LSI 9260，双SSD跑RAID0也能把RoC的iops吃光？
作者: linkey    时间: 2012-8-22 14:53
其中5次是单块盘掉电导致的重建?为啥会是单块盘?不小心碰断了硬盘电源线,自己拔的?
作者: linkey    时间: 2012-8-22 14:59
neeyuese 发表于 2012-8-22 14:10
这块卡我这也有，不过当IOPS爆到12万的时候（2块SSD RAID 0 跑iometer），卡的我机器都动不了了。。。。 ...

看来浴室玩过不少raid卡,那你推荐什么型号的?

也是和楼主差不多的需求.500-1200的预算.

没想ssd组raid.就是机械盘.
作者: nighttob    时间: 2012-8-22 15:00
linkey 发表于 2012-8-22 14:53
其中5次是单块盘掉电导致的重建?为啥会是单块盘?不小心碰断了硬盘电源线,自己拔的? ...

SATA 15pin电源线有点问题，有1次是碰掉的。因为硬盘太多了，电源给的不够多，用的转接线质量不好，后来给换了。
作者: neeyuese    时间: 2012-8-22 15:16
机械盘不组raid用啥阵列卡呢？
作者: nighttob    时间: 2012-8-22 15:29
neeyuese 发表于 2012-8-22 15:16
机械盘不组raid用啥阵列卡呢？

是说我么……
作者: neeyuese    时间: 2012-8-22 15:45
没有，是回复5楼的。用这卡做扩展卡比较奢侈。
作者: liwenchao    时间: 2012-8-22 16:00
neeyuese 发表于 2012-8-22 15:45
没有，是回复5楼的。用这卡做扩展卡比较奢侈。

5楼的意思应该是机械盘做raid,ssd不做。
作者: linkey    时间: 2012-8-22 16:09
neeyuese 发表于 2012-8-22 15:45
没有，是回复5楼的。用这卡做扩展卡比较奢侈。

750组raid,奢侈吗?

为了自己的数据,组个raid5.不算啥吧.坏硬盘太让人难受了.

求推荐
作者: neeyuese    时间: 2012-8-22 16:28
这卡没缓存组raid 5比较悲剧吧，我自己没组过呢。
作者: nighttob    时间: 2012-8-22 16:37
neeyuese 发表于 2012-8-22 16:28
这卡没缓存组raid 5比较悲剧吧，我自己没组过呢。

还挺好的了吧，我现在5块盘（ST2000DL003）RAID5，连续写有330MB/s，最后测试部分也贴了一张。用作仓库肯定是很不错的了。
作者: neeyuese    时间: 2012-8-22 16:38
恩，刚去看了下评测，确实不错，不过貌似资源占用会高点。
作者: Blxkcstb    时间: 2012-8-22 17:11
首先是主板RAID5，经过了解（我有个同学是在服务器部门工作）得知主板做RAID5就纯粹一悲剧，写入性能不及单块硬盘，同时不能提供像样的RAID5冗余保护能力，换句话说主板RAID还没硬盘本身可靠，所以这个方案被否决了。


主板自带的阵列功能真的这么惨？不管I或者A都是？
作者: windingway    时间: 2012-8-22 18:30
Raid5有平衡的容量和冗余度，但数据恢复还是比较复杂，特别是遇到非典型情况（我朋友公司出过一次，一块硬盘显示离线，但未提示的硬盘中也有一个有问题的。）
貌似可以在虚拟机环境下做些练习什么的。
关键是手上要有空白硬盘以备不时之需，一旦出现故障，可以把阵列中的硬盘全部备份，然后就可以做数据恢复工作了，即便是悲剧了也有后手。
作者: nighttob    时间: 2012-8-22 20:45
neeyuese 发表于 2012-8-22 16:38
恩，刚去看了下评测，确实不错，不过貌似资源占用会高点。

对这级别的卡来说，已经可以接受了。
其实买1230v2也是为了搭配这个用……
作者: nighttob    时间: 2012-8-22 20:47
Blxkcstb 发表于 2012-8-22 17:11
主板自带的阵列功能真的这么惨？不管I或者A都是？

相当惨，你要有多块闲盘的话可以自己组个试试。
速度慢，CPU、内存占用高。就跟软RAID没啥区别。
作者: Mufasa    时间: 2012-8-22 20:58
支持楼主。

我很多年前用Adaptec 2610SA做过一个Raid 5阵列，容量很小，只有320GB (3x160GB)
因为受当时的技术限制，读写速度只有40MB/s
过后也没有发生阵列故障，安全性没有验证过。
但给我的总体印象还是很好的。
作者: nighttob    时间: 2012-8-22 21:02
Mufasa 发表于 2012-8-22 20:58
支持楼主。

我很多年前用Adaptec 2610SA做过一个Raid 5阵列，容量很小，只有320GB (3x160GB)

很多年前RAID5还没发展成熟起来呢……
不过那时候硬盘也比现在靠谱的多……
作者: Blxkcstb    时间: 2012-8-23 00:45
nighttob 发表于 2012-8-22 20:47
相当惨，你要有多块闲盘的话可以自己组个试试。
速度慢，CPU、内存占用高。就跟软RAID没啥区别。 ...

我没有多余的HDD，其实我本来是在想用板载的阵列功能装台家用的NAS当数据仓库的。
作者: idle    时间: 2012-8-23 01:41
好帖子，能够在现在硬盘高价的时候有如此难得的独特分享，感谢楼主啊。回复mark一个，学习了。
作者: 仙賢戀軒    时间: 2012-8-23 01:42
orico也有类似的raid卡，而且便宜非常多

求详细差距。。。
作者: nighttob    时间: 2012-8-23 08:37
Blxkcstb 发表于 2012-8-23 00:45
我没有多余的HDD，其实我本来是在想用板载的阵列功能装台家用的NAS当数据仓库的。 ...

只能说这个勉强可用，只看性能的话，写入最多也就是跟单盘一样，读应该好一些。
但是最关键的是板载的RAID本身就不可靠，我听我同学说过，包括咱们论坛里也有人反映过，用主板做RAID很容易掉盘（相对于独立阵列卡来说）。而且板载RAID缺少一些RAID的必要功能，可用性较低。
作者: XXHJACK    时间: 2012-8-23 08:53
LZ为啥不买拆机的r5i r6i??
作者: linkey    时间: 2012-8-23 09:09
单盘掉电会掉盘.整机停电呢?供电环境差,没办法.

需不需要ups?
作者: nighttob    时间: 2012-8-23 09:21
本帖最后由 nighttob 于 2012-8-23 09:27 编辑
仙賢戀軒 发表于 2012-8-23 01:42
orico也有类似的raid卡，而且便宜非常多

求详细差距。。。


你说的应该就是"Orico csa3655-s5r"，那个内置5口的扩展卡吧？我不知道他们是不是又出新的了，反正我去年看的时候这就是最高端的了。
我当时查这块卡的详细资料的时候就很少，可靠的评测也没找到。就从他们给的资料知道是JMB362+JMB393的组合，JMB362是PCI-E1.x x1转双口SATA2.0，JMB393是把一个SATA2.0倍增（端口倍增，Port Multiplier）为五个（实际上是个六口SATA交换机），同时有RAID功能。
虽然不是没弄明白，但大概意思应该是，如果不接那条连主板的SATA线的时候，就是JMB393把JMB362其中的1个SATA分成5个，靠JMB393做RAID，与主机通信的时候完全是靠JMB362其中的一条SATA2.0，当然这也要受到PCI-E1.x x1的带宽限制。如果接连主板的那条SATA的话，就是把主板那个SATA倍增成5个，然后与主机通信就是靠主板上这个SATA口了。相对于走JMB362那个，直接连主板SATA这个带宽更有保障一点。但是不论如何，它的性能也就是限制在SATA2.0这300MB/s里了。
至于JMB393的RAID性能，看到一个沧者论坛有人测试三块250G用它做RAID5，单盘平均80MB/s，组RAID5以后130MB/s，不过这都是读，写怎么样不知道。（原帖，http://www.coolaler.com/showthre ... chi-250GB-*3-測試）。还有一个国外网站测试的（http://benchmarkreviews.com/inde ... =1&limitstart=0），不过这是个NAS，里面用的是JMB393，前面废话一堆，从第7页开始是测试，而且是拿SSD做的，RAID5写入悲剧到家了……高队列深度下写速度是个位数，连续写入能有100MB/s。我想不会有人拿这玩意接SSD做RAID的……

JMB362和JMB393的官网PDF，http://www.jmicron.com/PDF/JMB39X/JMB393.pdf;http://www.jmicron.com/PDF/JMB363/JMB362.pdf。
作者: nighttob    时间: 2012-8-23 09:23
XXHJACK 发表于 2012-8-23 08:53
LZ为啥不买拆机的r5i r6i??

8408E的5i我买过，装进机箱里开机没5分钟过热离线了。而且二手的BBU早就失效了，重新置办一套得多花200块钱，这就跟买个新的没啥区别了。
而且我说了，性能不是第一位的，只要连续读写能看就足够。
作者: nighttob    时间: 2012-8-23 09:25
linkey 发表于 2012-8-23 09:09
单盘掉电会掉盘.整机停电呢?供电环境差,没办法.

需不需要ups?

我已经配备UPS了，所以到目前为止没整机停电过。
不考虑阵列，硬盘本身就是很怕突然断电的，何况我这儿有5块在线。
作者: XXHJACK    时间: 2012-8-23 09:26
nighttob 发表于 2012-8-23 09:23
8408E的5i我买过，装进机箱里开机没5分钟过热离线了。而且二手的BBU早就失效了，重新置办一套得多花200块 ...

晕！这么霉。。。。。。。。我们公司的r5i和r6i现在一直很稳定，可能是sas的盘要好些的缘故吧！
作者: nighttob    时间: 2012-8-23 09:40
XXHJACK 发表于 2012-8-23 09:26
晕！这么霉。。。。。。。。我们公司的r5i和r6i现在一直很稳定，可能是sas的盘要好些的缘故吧！ ...

其实最关键的是，做RAID是追求可靠的，本来是要通过RAID硬件提高数据的可靠性，如果硬件本身就不可靠的话，造成的损失就更大。
这些二手的RAID卡本来就是用了几年淘汰下来的了，卡本身就是不稳定因素，把盘接上去自己一点都不踏实。
作者: XXHJACK    时间: 2012-8-23 14:46
nighttob 发表于 2012-8-23 09:40
其实最关键的是，做RAID是追求可靠的，本来是要通过RAID硬件提高数据的可靠性，如果硬件本身就不可靠的话 ...

这个怎么说吧！质量好的10来年也没啥问题，r5i和r6i并不算老了，可能你遇到的是个案。
大部分二手板卡(高端显卡从除外）都是很稳定的。
作者: nighttob    时间: 2012-8-23 14:51
XXHJACK 发表于 2012-8-23 14:46
这个怎么说吧！质量好的10来年也没啥问题，r5i和r6i并不算老了，可能你遇到的是个案。
大部分二手板卡(高 ...

心里不踏实是主要的。而且这老的SFF-8484线在塔式机箱里不好走线，前面有显卡就直接顶到了。
看网上的反应说，这卡就是很热，也看别人买二手的出现过过热离线的问题，这个BBU还是坏的。与其说自己DIY个小风扇，再自己配一个BBU，这套设备下来的钱也够买这个新的了。
作者: zzai111    时间: 2012-8-23 16:58
4个月里怎么会有那么多的单盘掉电？
作者: nighttob    时间: 2012-8-23 17:46
zzai111 发表于 2012-8-23 16:58
4个月里怎么会有那么多的单盘掉电？

因为老机器电源的插头不够多，用了各种转分线才够用，线的插头又不紧，所以老掉盘。
作者: steinrose    时间: 2012-8-24 13:08
R5的强连续读写操作确实很费CPU资源，几年前在ICH9R上做过4块WD2500JS的R5，当时用E2200下个BT都会卡，反而做R10带128M缓存效果好得多。必须得有独立的处理器，缓存大小随RAID级别和数据吞吐量模型而定。
作者: jack512    时间: 2012-8-26 15:53
这个京东上似乎卖1099，你在哪买的，给个链接
作者: nighttob    时间: 2012-8-26 16:13
jack512 发表于 2012-8-26 15:53
这个京东上似乎卖1099，你在哪买的，给个链接

TB上搜索Highpoint 2720，全都是￥750左右的。
作者: jack512    时间: 2012-8-26 16:56
没搜对地方，搜下去一大堆不相关的
作者: yangmicro    时间: 2012-8-27 10:16
说实话，我也不懂为何现在的hdd的质量会比原来的盘从心理上感觉要低，好几次想买大容量的hdd放些杂乱的数据都没有下手，当然还有个原因是泰国洪水事件太能折腾了，这个估计得看今年年底能不能恢复价格了。现在稍微重要点的工作和私人数据都是放在4块老黄标西数160gSata组的raid0+1阵列上，raid主控是主板自带的lsi低端。等存不下了，再看看新出的红盘吧。对了，建议多盘的还是要用硬盘的托架或者导轨，这样热插拔的时候方便些。raid5我用到时候一般都是3+1，没hot spare的话，最好还是不要用，现在的盘对于数据来说伤不起啊！
作者: nighttob    时间: 2012-8-27 10:48
yangmicro 发表于 2012-8-27 10:16
说实话，我也不懂为何现在的hdd的质量会比原来的盘从心理上感觉要低，好几次想买大容量的hdd放些杂乱的数据 ...

应该还是技术进步以后不能控制良率，就跟现在的显卡芯片一样，只能靠划分等级区分开来，品质高的做企业级，一般的做消费级，再差的就是大幅度屏蔽塞移动硬盘盒里了。

RAID10盘数比较少的话对低端主控来说也是能应付的了的，读写表现也不错，但就是空间利用率还是不高。对性能和可靠有高要求的企业环境用RAID10的更多一些，民用领域里其实挺纠结，成本低的RAID解决方案就是R10，但相应的在HDD上投入的成本就要高；能搞定R5的卡相对比较贵，但是盘上的成本相对低，所以RAID普及到民用还是不明朗。

我不需要热插拔，所以一般的塔式机箱就行了。真是要热插拔的话还是2U/3U那样的机架机箱更好用点，后面有暴力扇抽风。一般的塔式机箱，要是有热插拔位肯定没有风扇来降温了。
作者: junweb    时间: 2012-8-27 11:17
等后续测试。
作者: fantasyer    时间: 2012-8-27 16:56
硬盘插口满了， 入个这个扩展下怎么样 ， 比原生的会差多少？
作者: nighttob    时间: 2012-8-27 17:07
fantasyer 发表于 2012-8-27 16:56
硬盘插口满了， 入个这个扩展下怎么样 ， 比原生的会差多少？

这怎么说也是硬件RAID卡，当扩展卡用是在太浪费了。只是为了扩展SATA接口，买两片PCI-E x1转2/4口的那种更合适。非要一张卡给8口那种，可以看LSI 9240-8i那样的（IBM OEM版），或者更老的3081E（HP OEM版），这都是要单独买线的。

只当扩展卡用的话，这个跟原生的没区别。当然还是取决于你插在主板的那个槽上，如果是CPU给的x16槽里可能比主板原生的还强一些，要是插在PCH给的x4槽里因为绕远路了所以会差点。
作者: fantasyer    时间: 2012-8-27 17:16
主板还剩个PCI x16槽
主要是也想入个m3p或者m5p给台机用用
作者: fantasyer    时间: 2012-8-27 17:18
你推荐的那两款基本上价格也差不了多少啊
呵呵
作者: nighttob    时间: 2012-8-27 17:18
本帖最后由 nighttob 于 2012-8-27 17:20 编辑
fantasyer 发表于 2012-8-27 17:16
主板还剩个PCI x16槽
主要是也想入个m3p或者m5p给台机用用


如果就多一个还是用主板原生的吧，有些扩展卡对SSD的支持很烂，而且不能BOOT。
接HDD当仓库盘是没问题，但是一块卡上几块盘同时读写就要相互干扰了。

因为有的东西不是越新越好，老东西可能比新的更可靠一些。或者你可以看一些二手的RAID卡，8408E，8888ELP那样的，给DELL OEM的5i 6i。
作者: fantasyer    时间: 2012-8-27 17:31
nighttob 发表于 2012-8-27 17:18
如果就多一个还是用主板原生的吧，有些扩展卡对SSD的支持很烂，而且不能BOOT。
接HDD当仓库盘是没问题， ...

以前没出SSD的时候曾经关注过5i，6i。
的确是不错的产品，倒是可以考虑
不过这个卡的sata接口应该是2代的吧？
作者: nighttob    时间: 2012-8-27 17:34
fantasyer 发表于 2012-8-27 17:31
以前没出SSD的时候曾经关注过5i，6i。
的确是不错的产品，倒是可以考虑
不过这个卡的sata接口应该是2代的 ...

嗯，出的那时候也只有SATA2.0，所以就是接HDD用好点。
只是当扩展卡用也不用发愁没有BBU和缓存的事。但是LSI的方案有一点很不好就是，即使单盘用，也还是要初始化建立成单盘R0才能使，否则系统不认盘，如果不介意这点的话还是不错的。
作者: fantasyer    时间: 2012-8-27 17:37
nighttob 发表于 2012-8-27 17:34
嗯，出的那时候也只有SATA2.0，所以就是接HDD用好点。
只是当扩展卡用也不用发愁没有BBU和缓存的事。但是 ...

这样啊      那就算了   
现在工作太忙，没兴趣折腾了
就想入个简单易用的
作者: nighttob    时间: 2012-8-27 17:46
fantasyer 发表于 2012-8-27 17:37
这样啊      那就算了   
现在工作太忙，没兴趣折腾了
就想入个简单易用的

简单易用的还是那些PCI-E x1的扩展卡，把卡插上去就是即插即用，找主控好的卡性能也不坑。
RAID卡总是要折腾一下设置才能用的，而且开机还要占时间走RAID ROM。
作者: fantasyer    时间: 2012-8-27 22:36
nighttob 发表于 2012-8-27 17:46
简单易用的还是那些PCI-E x1的扩展卡，把卡插上去就是即插即用，找主控好的卡性能也不坑。
RAID卡总是要 ...

但是看了好多的x1扩展卡性能都比较差啊
作者: nighttob    时间: 2012-8-27 22:53
fantasyer 发表于 2012-8-27 22:36
但是看了好多的x1扩展卡性能都比较差啊

这就是断层了，没办法。
有一些PCI-E 2.0 x1的双口卡性能也不错的，当然要是做仓库盘扩展没必要太在意性能。真要性能的话还得是x4口的HBA。
作者: fantasyer    时间: 2012-8-27 23:34
nighttob 发表于 2012-8-27 22:53
这就是断层了，没办法。
有一些PCI-E 2.0 x1的双口卡性能也不错的，当然要是做仓库盘扩展没必要太在意性 ...

呵呵，主板比较老了，玩家国度的x38，没有x4的口，只有x16和x1的
作者: nighttob    时间: 2012-8-27 23:36
fantasyer 发表于 2012-8-27 23:34
呵呵，主板比较老了，玩家国度的x38，没有x4的口，只有x16和x1的

又没说不能把x4的插在x16上用。
没换机器之前我这个卡也是插主板唯一一条x16上用的。
作者: fantasyer    时间: 2012-8-27 23:43
本帖最后由 fantasyer 于 2012-8-27 23:45 编辑

这样啊，那考虑张x4扩展卡算了
作者: liwenchao    时间: 2012-8-27 23:47
fantasyer 发表于 2012-8-27 23:43
这样啊，那考虑张x4扩展卡算了

那你显卡插哪里？
作者: nighttob    时间: 2012-8-27 23:53
liwenchao 发表于 2012-8-27 23:47
那你显卡插哪里？

集显啊，又不是所有电脑都需要独显……
作者: liwenchao    时间: 2012-8-27 23:55
nighttob 发表于 2012-8-27 23:53
集显啊，又不是所有电脑都需要独显……

他的是X38啊。
那就只能插一个pci-e 1X的显卡。
作者: nighttob    时间: 2012-8-28 00:16
liwenchao 发表于 2012-8-27 23:55
他的是X38啊。
那就只能插一个pci-e 1X的显卡。

人家用的是ROG X38，两条x16的，可以拆分x8+x8的。
作者: fantasyer    时间: 2012-8-28 10:56
liwenchao 发表于 2012-8-27 23:55
他的是X38啊。
那就只能插一个pci-e 1X的显卡。

呵呵   X38是有两条pci-e x16的
作者: fantasyer    时间: 2012-8-28 17:46
和淘宝的聊了下
SATA6g扩展卡目前都不怎么样
入了个9240-8i
作者: kartanus    时间: 2012-8-28 17:49
本帖最后由 kartanus 于 2012-8-28 17:51 编辑

好像是这样的

RAID 0的话 板载的也够用了
RAID 5的话 最好买个RAID卡并且缓存大于128MB最好...

如果仅仅是数据备份 着实不太推荐RAID 5
一块一块2TB 3TB保存也可以了~

因为想要没有系统资源占用的RAID 就必须是SAS硬盘
因为SAS硬盘本身有个啥东西自己就有一个小的控制器还是啥的
总之不会用到CPU等PC的资源 直接调用 非常完美...
但是SAS的容量......

只有做视频采集等等的可以选择板载RAID 0 或者RAID卡上RAID 5
仅仅是保存片子没必要的~

<<题外话
Orico？额 除非你现在的主板的RAID 0都差到不能自已
然后你又非常想要RAID 0功能 那么可以去买一块
买这货的RAID卡去组RAID 5
无异于找死...
作者: fantasyer    时间: 2012-8-30 08:59
nighttob 发表于 2012-8-27 17:34
嗯，出的那时候也只有SATA2.0，所以就是接HDD用好点。
只是当扩展卡用也不用发愁没有BBU和缓存的事。但是 ...

9240-8I（IBM）到手，现在的固件直接接线就可以用IR模式穿透
作者: ycliyong    时间: 2012-8-30 09:20
觉得做RAID5 的话，没缓存就是杯具
作者: nighttob    时间: 2012-8-30 09:21
fantasyer 发表于 2012-8-30 08:59
9240-8I（IBM）到手，现在的固件直接接线就可以用IR模式穿透

看来是改的更人性化一点了，不然HBA也要单盘做R0实在有点麻烦。
好用就好。
作者: nighttob    时间: 2012-8-30 09:23
ycliyong 发表于 2012-8-30 09:20
觉得做RAID5 的话，没缓存就是杯具

这个还是看主控和固件，如果做的好的话也行，但终究在高性能要求的地方还是缓存必须。
其实也有点像Marvell主控的SSD和SF主控SSD似的，买适合自己用的就对了。
作者: fantasyer    时间: 2012-8-30 12:32
nighttob 发表于 2012-8-30 09:21
看来是改的更人性化一点了，不然HBA也要单盘做R0实在有点麻烦。
好用就好。 ...

易用性还可以
启动等待时间也不长
用作扩展卡的确不错
速度也还可以
作者: elfxx    时间: 2012-9-2 08:58
这卡和主板板载的最大区别是不能做主引导盘, 所以应该也没人用这做ssd的raid用.
作者: nighttob    时间: 2012-9-3 10:51
elfxx 发表于 2012-9-2 08:58
这卡和主板板载的最大区别是不能做主引导盘, 所以应该也没人用这做ssd的raid用. ...

再低端这也是企业级RAID卡，是可以引导硬件RAID启动的，我在FW里关掉了而已，因为我只需要拿当仓库阵列。在有多块RAID卡的时候，都设置可引导会导致一些莫名其妙的BUG。

一样可以用SSD，但是这卡的iops不足以保证多块SSD同时操作的性能，即使是LSI的顶级卡也未必，SSD的iops太暴力了。
作者: Vasavartin    时间: 2012-9-3 12:14
做了RAID还是怕误删除，怕病毒。还是直接搞个盘备份算了。
作者: nighttob    时间: 2012-9-3 13:18
Vasavartin 发表于 2012-9-3 12:14
做了RAID还是怕误删除，怕病毒。还是直接搞个盘备份算了。

这完全是两码事好吧……

什么安全措施也不能防止人犯傻对不对，把备份盘摔坏了不也一样完蛋。
作者: Vasavartin    时间: 2012-9-3 15:28
最近对win8的存储空间和文件历史这两个功能比较感兴趣。比起软RAID来，存储空间基于数据池的文件级管理弹性更好一些，现在没条件测读写速度，就在虚拟机上装了玩玩。
作者: houshuheng    时间: 2012-9-5 07:22
不知道LZ对外置硬盘模组盒有了解吗
看过好几个牌子 评价参差不齐 主要是想拿来当仓库盘 现在4T都塞得满满的
这3个硬盘用了有5年了 我怕哪一天挂了 我就哭死了 多少素材和高清电影在里面啊
所以想买个4盘或者5盘 可以组raid5的 但是不知道效果如何
作者: jazy1377777    时间: 2012-9-11 00:21
那如果想要2块ssd组raid 0，板载南桥和raid卡有区别么
作者: nighttob    时间: 2012-9-11 09:34
houshuheng 发表于 2012-9-5 07:22
不知道LZ对外置硬盘模组盒有了解吗
看过好几个牌子 评价参差不齐 主要是想拿来当仓库盘 现在4T都塞得满满 ...

我只买过双盘位的，4/5个盘的价格太高，不如直接内置了，而且功能上我不能完全把握。
相对来说外置的比内置的更容易出毛病，不论企业级还是民用都是。至于说性能如何，关键看主控，像我之前回帖里提到的一个5盘位的外置阵列盒用的JMB393主控，RAID5性能只是做仓库的话还可以看。
作者: nighttob    时间: 2012-9-11 09:40
jazy1377777 发表于 2012-9-11 00:21
那如果想要2块ssd组raid 0，板载南桥和raid卡有区别么

只是双盘的话南桥应该会好点，不过这也区分你拿什么南桥跟RAID卡比。
我这个卡因为主控和没缓存的问题，所以IOPs能力比较低，不适合接SSD跑随机，所以发挥不出SSD优势。你要能买到LSI 9260这样的强力货，接4块盘应该不成问题，但是目前RAID卡对SSD的优化进程依然很慢。Intel已经说可以在Z77上支持SSD RAID0的Trim了，独立RAID卡就没那待遇了。
作者: cio    时间: 2012-9-18 00:08
不错的帖子
作者: cybluesky    时间: 2012-9-20 13:52
请教楼主，一般服务器自带的阵列卡，两块硬盘组了Raid0，是否可以再加一块硬盘组成三块硬盘的Raid0，实现在线迁移（不需要挪动数据）？
作者: nighttob    时间: 2012-9-20 23:53
cybluesky 发表于 2012-9-20 13:52
请教楼主，一般服务器自带的阵列卡，两块硬盘组了Raid0，是否可以再加一块硬盘组成三块硬盘的Raid0，实现在 ...

看你用的什么板载芯片了，这个不一定的。如果是LSI9240这样的应该是可以OCE，不过RAID0这么干风险比较大。
作者: cybluesky    时间: 2012-9-21 08:56
nighttob 发表于 2012-9-20 23:53
看你用的什么板载芯片了，这个不一定的。如果是LSI9240这样的应该是可以OCE，不过RAID0这么干风险比较大 ...

感谢楼主的回复^_^Raid0 OCE的风险是体现在什么地方呢？能否简单说下Raid0 OCE的原理呢？十分感谢
作者: nighttob    时间: 2012-9-21 09:44
cybluesky 发表于 2012-9-21 08:56
感谢楼主的回复^_^Raid0 OCE的风险是体现在什么地方呢？能否简单说下Raid0 OCE的原理呢？十分感谢 ...

因为RAID0本身没有数据冗余，所以你OCE的过程中当然也没有。OCE过程中会非常密集地读写，如果这个过程中硬盘卡壳然后掉盘了，那所有数据就玩完，当然可以通过外部手段恢复，但这是另外一回事了。
一般来说，给阵列扩充盘都是直接重建阵列的，OCE只是“不得不”的选择。所以，如果你有可用来临时存放阵列数据的空间，就尽量删除新建阵列。
OCE的原理就是先把现有阵列的数据读到RAID卡缓存或者系统内存里，然后再计算分块写入到硬盘中。比如你现在是双盘R0，那就是先把双盘里的数据读到内存里，然后RAID卡将这块分两块保存的数据改成分三块保存的，之后写入进三盘中。当然这是一点一点读写的，因为缓存和内存空间毕竟有限，如果是没有板载缓存的话，这个过程可能很漫长，而且还是要看你硬盘本身的读写速度。
作者: xiapi    时间: 2012-9-21 21:13
nighttob 发表于 2012-9-21 09:44
因为RAID0本身没有数据冗余，所以你OCE的过程中当然也没有。OCE过程中会非常密集地读写，如果这个过程中 ...

请教一下楼主，有没有什么办法看这个卡PICE工作模式或带宽？另外有没有这个卡最大吞吐量性能参数？


作者: nighttob    时间: 2012-9-21 22:11
xiapi 发表于 2012-9-21 21:13
请教一下楼主，有没有什么办法看这个卡PICE工作模式或带宽？另外有没有这个卡最大吞吐量性能参数？

工作模式可以在AIDA64的设备-PCI设备里面看。
最大吞吐量数据看官方PDF里写的，他们不写谁也不知道。这个卡这个参数标识的不是很清楚，写入IOPs我估计也就5位数的水平最多了。
作者: xiapi    时间: 2012-9-21 22:25
nighttob 发表于 2012-9-21 22:11
工作模式可以在AIDA64的设备-PCI设备里面看。
最大吞吐量数据看官方PDF里写的，他们不写谁也不知道。这个 ...

看Highpoint网站上有一个PDF，里面2720 8 SAS RAID5读写可以到1.2GB/s，很牛X。
RocketRAID_272x_Defeats_MegaRAID_9240_Performance_Report.pdf

在你的推荐下也入了个2720，现在筹备硬盘中
作者: abing    时间: 2012-9-22 18:11
请问，用这可建立的RAID5，只作数据仓库的话，在系统重装或者硬件故障（非raid卡）时，会破坏RAID5的数据么？
我的设想是系统盘使用SSD，用RAID5挂接到系统作为数据仓库使用。
作者: nighttob    时间: 2012-9-22 19:10
xiapi 发表于 2012-9-21 22:25
看Highpoint网站上有一个PDF，里面2720 8 SAS RAID5读写可以到1.2GB/s，很牛X。
RocketRAID_272x_Defeats ...

官方的历来都是有水份的，看看AMD和NV的幻灯片就知道……
这个PDF我看了很多回了，除了表达出能玩秒LSI9240 R5的性能以外，没有什么有价值的。
国外很多媒体测试，这卡R5/R6性能也都是800M/600M的水平，最终到你手里是什么样还要看你的主机平台和硬盘而定。
作者: nighttob    时间: 2012-9-22 19:18
abing 发表于 2012-9-22 18:11
请问，用这可建立的RAID5，只作数据仓库的话，在系统重装或者硬件故障（非raid卡）时，会破坏RAID5的数据么 ...

没影响。即使是RAID卡故障，一般也不会影响到阵列里的数据，这是RAID的基本特性之一。
在windows系统中，系统直接操作的是阵列卡而不是阵列中的磁盘本身（有一定虚拟化的概念），所以你不装阵列卡的驱动，系统就完全管不了磁盘。
即使是阵列卡故障，或者要更换阵列卡，只要是同型号或者可兼容型号就可以无缝转换。RAID信息是保存在磁盘上的，只要磁盘正常，即使阵列卡故障没有替代可恢复，也可以通过外部手段读出数据的（RAID数据恢复）。但除非是刷固件刷黑、ROC芯片长期过热、严重超期服役这样的情况，RAID卡本身是很可靠的。
作者: abing    时间: 2012-9-22 19:28
呵呵，多谢。不过在易用性方面，还是类似ORICO 3559RUS3 那种5盘位的RAID硬盘盒磁盘阵列箱，带有USB3.0和eSATA接口，独立于操作系统，更加方便。
作者: nighttob    时间: 2012-9-22 20:40
abing 发表于 2012-9-22 19:28
呵呵，多谢。不过在易用性方面，还是类似ORICO 3559RUS3 那种5盘位的RAID硬盘盒磁盘阵列箱，带有USB3.0和eS ...

外置的话我就自己DIY个JBOD阵列柜了，那个玩意不够我用的。
作者: abing    时间: 2012-9-22 21:04
JBOD的话，坏一颗硬盘就会杯具啊！
作者: nighttob    时间: 2012-9-22 23:01
abing 发表于 2012-9-22 21:04
JBOD的话，坏一颗硬盘就会杯具啊！

你了解啥是JBOD么……JBOD只是一个外部组织形式，不是RAID形式。你要说R0或者串接模式才是坏一个就全毁。JBOD就是每块盘都单独的，靠阵列卡给它做RAID。这个方案就是存储单元和阵列卡（主机）相分离，跟那种外置阵列盒一样只用单条线缆连接阵列柜和阵列卡，不过这比5盘8盘的可复杂多了，可用性也更高，也一样是单独供电。
作者: linkey    时间: 2012-11-1 13:22
本帖最后由 linkey 于 2012-11-1 17:19 编辑

请问这卡最多能接几个硬盘?我想组raid6

ps用这芯片的,有没有有缓存的型号.大概多少rmb?
作者: nighttob    时间: 2012-11-2 11:02
linkey 发表于 2012-11-1 13:22
请问这卡最多能接几个硬盘?我想组raid6

ps用这芯片的,有没有有缓存的型号.大概多少rmb? ...

原生8盘，官方没明说能不能自己接SAS Expander扩展，应该是可以的。但是不清楚扩展以后还可不可以支持RAID6，HPT自家的扩展方案，RR2740/2760这样16/24口的，都没写支持RAID6。
如果你有8盘以上RAID6的需求的话，电邮下他们吧。他们在中国大陆有技术支持。
http://www.highpoint-tech.cn/Chi ... cketraid_salesc.htm

HPT RR 27xx系列，以及旧的26xx系列都是无缓存的，HPT家有缓存的都是4xxx系列以上的了，用的就是Marvell的另一款芯片了。
作者: linkey    时间: 2012-11-2 13:27
本帖最后由 linkey 于 2012-11-2 13:31 编辑
nighttob 发表于 2012-11-2 11:02
原生8盘，官方没明说能不能自己接SAS Expander扩展，应该是可以的。但是不清楚扩展以后还可不可以支持RAI ...


请问按照你的经验,推测一下8个3tb的盘重建raid要多长时间?raid5的情况.

硬盘传输速度110MB/s吧
作者: nighttob    时间: 2012-11-2 21:07
linkey 发表于 2012-11-2 13:27
请问按照你的经验,推测一下8个3tb的盘重建raid要多长时间?raid5的情况.

硬盘传输速度110MB/s吧 ...

只要没撑爆卡的话，就是单硬盘容量/读写速度。
比如我现在的，2TB 110MB/s，RAID5重建就是5个半小时。换个更慢点的就是6个半小时。
你这个也就是8-9小时的样子。
作者: linkey    时间: 2012-11-2 21:32
请问你调查过dell的raid卡吗?

淘宝上有卖带那种电池带缓存的,还有可以插内存上去的.

貌似蛮高端的,也不贵.
作者: nighttob    时间: 2012-11-2 23:34
linkey 发表于 2012-11-2 21:32
请问你调查过dell的raid卡吗?

淘宝上有卖带那种电池带缓存的,还有可以插内存上去的.

那都是二手拆机的5i/6i，是LSI上代和上上代RAID卡的OEM版。
如果你就是家用存储，买这个可以。不需要电池，有缓存直接强开就行，当然家里得保证不常断电，或者单独准备UPS。因为即使你买了电池，多半也损耗的差不多了，买个新电池就相当于买半个新卡了，不值。
然后另外要注意的就是，这些卡的主控发热比较高，要注意主动散热。只靠机箱内部空气流通，温度会相当高，可能会宕掉。
这些卡的固件可以刷成LSI原版的，如果你要买的话仔细看下主控，然后去LSI那边找相关资料。

还有HP OEM的P410等，这个比DELL 5i/6i稍微新一点，样子跟LSI原版造型也差不多，板载缓存也是直接焊在PCB上的，不像5i/6i是单独的RDIMM插上去。价格略贵一点。
作者: linkey    时间: 2012-11-9 20:14
nighttob 发表于 2012-11-2 23:34
那都是二手拆机的5i/6i，是LSI上代和上上代RAID卡的OEM版。
如果你就是家用存储，买这个可以。不需要电池 ...

请问你用的是什么机箱呢?有9个硬盘位的机箱少见吧?

8个组阵列,一个装做系统盘.

而且现在绝大部分的硬盘位都是一个接一个地挨在一起,很担心他们的散热通风.
作者: 778856    时间: 2012-11-9 21:15
看起来还是比较麻烦 raid 还是回老家再折腾吧



欢迎光临 PCEVA,PC绝对领域,探寻真正的电脑知识 (https://bbs.pceva.com.cn/) Powered by Discuz! X3.2