本帖最后由 larryexchange 于 2017-2-22 12:08 编辑
一直想给自己的实验室添加一个超融合的群集。有这想法很久了,最近出了一些东西,凑了点钱,决定搞起。先分享一下选择的心路历程。一直耽于写长文,不过这次确实折腾的有点狠,觉得有必要记录下来给自己一个交代 :)
同样是集成四台服务器系统,几年前就考虑过DELL的VRTX。主要优点是颜值高、噪音小(相对于机架式服务器);主要缺点是贵,再加上25块磁盘无法真正直通分给四个节点,不适合作为软件定义存储。故而放弃。
就在那时,DELL的朋友向我推荐了C系列的服务器。这是我第一次见到C系列的四子星这样的东西。坦白说颜值不够啊。后来在@allenxml 那儿欣赏他搭建的四路E7/ 1TB内存的服务器时,他也向我提过超微也有这么个东西。一样是四个节点,四子星更加紧凑(2U,而不是VRTX的5U),节点之间除了共享电源,别的全都独立。这样的结构更加简单。特别是二手的C6220简直就是白菜价,4节点,24个2.5寸盘位的准系统只要7500。盘算着加上8块E5-2670,也就1万出头。DDR3的内存也比DDR4要便宜多了。下面就是C6220的样子。
在做了一点功课后,很快就发现了C6220的不足:
- 不支持Ivy Bridge。相较于Sandy Bridge,Ivy Bridge除了有更多核心以外,新的架构配合新的Offload技术可以提供更好的网络虚拟化和存储虚拟化性能。
- PCIe扩展槽是PCIe 2.0的而不是3.0的。我打算配上全闪存,这样这个PCIe 2.0可能就会成为我的瓶颈,无论是装x8的HBA卡,还是用NVMe的盘做缓存。
- 板载的6个SATA接口有4个是SATA2。
- 没有集成万兆网卡。不过好在可以通过外加刀卡的方式扩展一个双口Mellanox ConnectX-2。
于是又将目光转向INTEL H2000系统,看中的型号是H2216WPQKR(http://ark.intel.com/products/61 ... r-System-H2216WPQKR),可以装16块2.5寸的硬盘
H2216WPQ除了磁盘数量比C6220少,只有16块2.5寸硬盘外,别的都完胜。包括上面列举的C6220的不足。但是... ... 年前开始到年后,全网都缺货,首先Ivy Bridge这种老平台肯定已经早就停产了,存货也都是12块3.5寸的H2312,而且还不带万兆光口,加上INTEL的H2000的节点远程管理模块RMM都是选配的,这也会增加不少成本。
不得已只得又重新开始寻找合适的四字星。这时候之前被我直接忽略的C6220 II重新回到了我的视野里。之前忽略主要是觉得C6220 II仅仅是比C6220多支持了E5-V2的CPU,就贵了很多,性价比不高。而且SATA也还是一样的只有两个是SATA3的。
重新仔细研究了C6220 II与C6220的区别(见下图)
发现了C6220 II除了CPU可以支持E5-V2以外(DDR3时代最多只能支持到V2,V3开始就需要新的主板和DDR4的内存了),至少还可以支持PCIe 3.0标准扩展槽。通过刀卡,也可以支持6Gbps的SATA/SAS盘。这样C6220上的几点不满意的地方多少都有变通的方法可以解决。
决定了,就是它了。
|