PCEVA,PC绝对领域,探寻真正的电脑知识
打印 上一主题 下一主题
开启左侧

入门存储 DELL EMC NX3240开箱

[复制链接]
跳转到指定楼层
1#
levelgo 发表于 2019-8-4 01:25 | 只看该作者 回帖奖励 |正序浏览 |阅读模式
点击数:14264|回复数:39
恩~自上次dell t330开箱已经过去2年多了,这期间工作室已经由小作坊升级成公司了,自己拍摄的设备也从fs5、 fs7 变成red、 arri,这个数据量啊,也越来越大。t330+ts540+4台dell NX3230总计97TB的空间还剩不到7TB,这次一口气买了4台DELL EMC NX3240,开贴记录一下。


因为现在已经有机房了,所以这次买的是2U的存储设备,自打dell把emc收购以后,所有设备的前脸都变成这种六边形网孔罩了

来个45度照片,对了,这回dell相对来说比较厚道,机器自带正版win storage server 2016  标准版 。


拆开网罩,正面是12个热插拔存储盘位,默认机器送两块2t SATA盘,不过之前买NX3240上一代机器NX3230还是送SAS 2t盘,差评。

经典的小屏幕,三键设计从29xx时代起就没变过,这次屏幕材质换成了oled,且从主机移到了网罩上,平时为蓝色出现故障时为琥珀色。

右侧挂耳处依次为电源开关 2个usb口、vga接口、idrac direct接口、这个idrac direct接口可以理解为直连idrac系统的串口,调试的时候不像旧系统那样需要和后面rs232复用,下面那个黑色突出物是服务器快速服务代码序列号标签。

左侧挂耳是系统位置指示灯、近场通信开关、以及五个系统状态指示灯


这里借用dell官方手册来说明一下。


正面说完了,咱们就要转向菊花处了,下半部分接口从左往右依次是系统位置指示灯、idrac网口、RS232接口、VGA接口、USB接口、4个Broadcom千兆网卡以及两个PSU模块、上半部分有3个全高的pci-e 8x接口 ,一个pci-e 8x半高接口,和两个3.5寸热插拔盘位,这两个盘为就是NX3240的系统盘。


这个750W的PSU模块照例还是台达代工的 ,80plus白金, 半透明把手在PSU工作正常的时候是绿色的,当PSU工作不正常时会变成红色。


东芝OEM的2.5寸600G 万转SAS硬盘,做系统盘足够了,这俩盘默认为RAID1


说完外边,现在开盖说里边,之前dell的销售说他们在2u机箱里面实现了16个3.5可用盘位,在收到货前我一直纳闷他们是怎么实现的,当时想可能和超微的机箱一样牺牲pci-e把4个盘位塞到菊花处。收货以后dell的设计确实给我一个惊喜,在不牺牲pci-e的基础上还有系统盘的位置,这样算下来在2u机箱内塞下了18盘。


顶盖上的系统说明,放了张大图,有需要的可以另存。



整个系统的俯视图,可以说把2u空间用到了极致。


系统功能大致说明


这个风扇有点意思,单层3叶扇,做了动平衡,上次见到3叶扇还是在mac g5上,使用叶数少的风扇应该和风压有关系。


电产马达制造。



风扇墙可以整组拆下来。


拆掉风扇墙就可以看到前置硬盘背板,这里有一个SAS Expander,散热系统设计的很精巧,整个系统的所有硬盘都是通过这个SAS Expander接入H730p阵列卡。


中间驱动器托盘(dell官方叫法)覆盖在CPU和内存上方,由于这个中间驱动器的存在,整个系统的在机柜上固定的轨道都变成抽屉式的了,导致上架异常的麻烦。


拆掉电源线和sas电缆,就可以将整个中间驱动器托盘取出



取出后就可以看到NX3240的主板了,双路主板只上了单U,配置为 Intel Xeon Bronze 3104×1    8g DDR4 2133 REG ECC ×2

系统截图



CPU细节


H730Pmini阵列卡,本质上是安华高9361-8i的马甲,使用了一个特殊的接口与主板连接,SFF-8643接口也变成了一组排线。


pci-e接口,只有8x,但是接万兆网卡妥妥的。



本次开箱就到此结束了,为啥木有测试,因为我在等固态,我比较好奇这颗U还有H730p的极限能力,等16块850evo500g到齐了我再跑测试,另外就是这几台机器还在等菊厂的万兆网卡和万兆交换机,等都到齐了再做一次万兆的性能测试,完~

ps1:
小彩蛋,之前有人跟我说dell的主板已经不是厦门dell在做了,看来是真的


ps2:


一点感慨



13年的时候我连raid是什么都不知道,14年入了hp n54l 开启了我的存储之旅 15年左右入了hp gen8尝试组第一套raid ,16年入了联想TS540做工作室的存储 17年的时候入了第一台企业服务器dell t330做存储,陆陆续续入了hp 1450  dell EQL PS4100e  dell NX3230  到现在的dell NX3240,我从没想过自己的工作室会成为公司,拥有自己的机房、渲染农场,从sony大扛到red、arri,自己能成为联合创始人,并管理着接近200T的数据。
可能一切的原起与努力,都是为了实现自己的梦吧


完~ 2019年8月4日凌晨





本帖子中包含更多资源

您需要 登录 才可以下载或查看,没有帐号?注册

x
40#
Pale_Cheung 发表于 2019-9-8 17:18 | 只看该作者
创业初期,微软保护费可以“缓交”,要上市了,这个都要正规起来。
服务的价格有时候比硬件贵正常。
靠谱的IT,除非北京户口不为了钱的。1万打不下来。
39#
helixzz 发表于 2019-8-29 15:16 | 只看该作者
jackshell 发表于 2019-8-28 14:58
价格怎么样?
PS:R740XD2出了有段时间吧,代理商说好像去年就有啊

我们买的配置:- 机箱配置 2(24*3.5+2*3.5,后置盘位直连芯片组),Riser 配置 2
- 2* Xeon Silver 4210
- 8* 16GB DDR4 2933MHz
- 240GB M.2 BOSS RAID-1
- 24* 12TB 7.2K RPM NLSAS HDD
- 2* 1.92TB S4610 SATA SSD
- H730P Mini PERC
- Mellanox 25GbE 双端口网卡
- iDRAC Enterprise
- 1100W 双电源
总价十万少个几百块。

38#
dazhe 发表于 2019-8-29 13:56 | 只看该作者
已经有26盘位了型号
37#
jackshell 发表于 2019-8-28 14:58 | 只看该作者
helixzz 发表于 2019-8-23 16:13
其实就是 R740xd…
不知道楼主考不考虑今年新出的 R740xd2 呀,我们上了几台,还是比较香的,能支持 24*3.5 ...

价格怎么样?
PS:R740XD2出了有段时间吧,代理商说好像去年就有啊


36#
levelgo  楼主| 发表于 2019-8-26 15:22 | 只看该作者
helixzz 发表于 2019-8-23 16:13
其实就是 R740xd…
不知道楼主考不考虑今年新出的 R740xd2 呀,我们上了几台,还是比较香的,能支持 24*3.5 ...

机柜有的是,不需要那么高存储密度,8个标准柜现在还空着一半
35#
helixzz 发表于 2019-8-23 16:14 | 只看该作者
nighttob 发表于 2019-8-6 22:05
作为一个曾经做客户界面的……我可以负责任地说还在100M时代的单位真不少……
当然买来做存储的至少会有 ...

NDC 标配千兆其实也符合某些“最佳实践”要求的数据与管理分离吧,数据走额外加的网卡(而且现在也很多在用 25G 了)
34#
helixzz 发表于 2019-8-23 16:13 | 只看该作者
其实就是 R740xd…
不知道楼主考不考虑今年新出的 R740xd2 呀,我们上了几台,还是比较香的,能支持 24*3.5+2*2.5,系统盘可以用 M.2 BOSS
33#
jackshell 发表于 2019-8-11 07:53 | 只看该作者
顶楼上,现在确实是这么个业态。
32#
水银灯 发表于 2019-8-9 23:38 | 只看该作者
levelgo 发表于 2019-8-7 23:13
菊厂=华为,牙膏厂=intel,别搞混了 我知道这个就是r740xd的马甲,但是r740xd是服务器,这个是 ...

支持一个现在我连阵列卡都不想用。直接HBA卡。所有的都是WIN原生功能。
性能不够内存来凑不行加SSD。省事省力。只要CPU和内存足够一切都不是问题。


31#
eterfinity 发表于 2019-8-8 17:35 | 只看该作者
本帖最后由 eterfinity 于 2019-8-8 17:50 编辑
nighttob 发表于 2019-8-8 13:12
那到底是我打开方式有问题,还是这业务有毒
现在就是RAID1直接给VM用,然后不时的卡死你



\
图上一堆EMC是异步复制的Unity虚拟版, vmdk是厚置备延迟置0 ,这个写入是备份软件5点半多开始备份的速度

服务器就是那个R740,阵列卡是8G缓存的H740p  (当前固件只用到4GB)  3组raid1


本帖子中包含更多资源

您需要 登录 才可以下载或查看,没有帐号?注册

x
30#
jackshell 发表于 2019-8-8 14:17 | 只看该作者
对了,戴尔还有一台R740XD2,2U主机,硬盘位最多可以有26个槽。这款就是我们当时看中的。大容量,性价比很高,就是不知道折扣怎么样。
29#
nighttob 发表于 2019-8-8 13:12 | 只看该作者
eterfinity 发表于 2019-8-8 11:00
NL上直接跑vm  性能不差的
不谈iops seq速率单盘190MB+   
把盘分多个raid1 合理分配虚拟机 一般的企业用 ...

那到底是我打开方式有问题,还是这业务有毒
现在就是RAID1直接给VM用,然后不时的卡死你

我开始也认为NL RAID1跑VM是完全OK的,直到被现实摆了一道
最可气的是虽然有CC但是没合适的SSD,把手里的几个弄上去反而慢,而且WL噌噌掉
28#
eterfinity 发表于 2019-8-8 11:00 | 只看该作者
nighttob 发表于 2019-8-8 10:07
如果是MR ROC自己去做了Emulation的话,开销也是ROC来负担,况且现在MR3.5的ROC性能爆炸,这还是绰绰有余 ...

NL上直接跑vm  性能不差的
不谈iops seq速率单盘190MB+   
把盘分多个raid1 合理分配虚拟机 一般的企业用用可以了
比如6个NL盘分成3个raid1  每个raid1负载3个vm
如果对iops有要求  那配SSD   
10k 15k性能很尴尬都不愿意去配

27#
jackshell 发表于 2019-8-8 10:49 | 只看该作者
群晖我是跨洋打电话过去,然后可以人工协助,态度很好;也可以远程支持。
一般来说群晖本地只能靠代理商,代理商离我近,保修还算靠谱;外地的不知道怎么办。

DELL性价比看起来是不错,我也倾向于选择DELL EMC。只是总部的价格好像是不能商量的意思,代理商可以有折扣的吧?60%-70%?
另外补充一下,听DELL销售说,维保在购买之初买会便宜点;后面追加的话就贼贵了。
这款NX3240默认要带2块(后置)盘+4块(前置)盘,估计只有像楼主一样,从代理商下单才能破解出货限制。
26#
nighttob 发表于 2019-8-8 10:07 | 只看该作者
eterfinity 发表于 2019-8-8 06:12
机械盘的512e属性如果被端到端完整透传   那么vmfs5只要一开快照  性能降低90% 连ESXi管理都会卡顿  
不 ...

如果是MR ROC自己去做了Emulation的话,开销也是ROC来负担,况且现在MR3.5的ROC性能爆炸,这还是绰绰有余的。

话说现在真有人在NL上面直接跑VM?
不开快照这都直接原地升天了吧。
25#
eterfinity 发表于 2019-8-8 06:12 | 只看该作者
本帖最后由 eterfinity 于 2019-8-8 06:36 编辑
nighttob 发表于 2019-8-7 17:15
现在超过8T的盘都是512e的,不用就没得用
我觉得你说的这情况就是阵列卡发挥作用了
之前我一直想测试一下 ...


机械盘的512e属性如果被端到端完整透传   那么vmfs5只要一开快照  性能降低90% 连ESXi管理都会卡顿  
不开快照性能降低30%左右  
vmfs6虽然支持512e, 但实际也会折损性能

实测各家OEM的mr3.5阵列卡  固件上都把512e作为512n来处理,但会玩文字游戏(显示为512b,或显示为512, 某厂家连在线直购选项里也是不带字母的512)
这样vmfs5开快照后还能用,就是加大了盘主控的负载
sas盘应该是主控资源要维持双链路的关系 这个场景下性能比同一血统的sata盘差,sata盘轻松跑到每个盘位190MB,sas盘基本在90-110左右

上代的mr3 OEM卡全都是透传512e , 各大厂家都遇到多例无法解决的vmfs5性能问题,遇到问题就学乖了
至于LSI自家的卡  正版卡那价格我是不碰的  哈哈哈哈

附图


本帖子中包含更多资源

您需要 登录 才可以下载或查看,没有帐号?注册

x
24#
eterfinity 发表于 2019-8-8 05:49 | 只看该作者
本帖最后由 eterfinity 于 2019-8-8 05:55 编辑
levelgo 发表于 2019-8-7 23:13
菊厂=华为,牙膏厂=intel,别搞混了 我知道这个就是r740xd的马甲,但是r740xd是服务器,这个是 ...


群晖最大的问题是  升个补丁就文件系统损毁     -------   在原生Linux上额外开发的都是拿稳定换功能,真以为开源代码有多健壮
win  最大的优势就是 补丁随便升  ms家升级补丁就是基本功
至于贵  贵在OEM的wss这个系统上
23#
li2921578 发表于 2019-8-8 00:46 | 只看该作者
levelgo 发表于 2019-8-7 23:13
菊厂=华为,牙膏厂=intel,别搞混了 我知道这个就是r740xd的马甲,但是r740xd是服务器,这个是 ...

商业使用 还是有维保上门来的好。
群晖之类。。。出出问题都要寄回去厂家。。
22#
levelgo  楼主| 发表于 2019-8-7 23:13 | 只看该作者
jackshell 发表于 2019-8-7 22:35
菊厂是intel?
前阵子关注了一下机型,发现R740XD盘位跟这货一样,价格比这个货低很多。楼主当时不考虑上R7 ...

菊厂=华为,牙膏厂=intel,别搞混了 我知道这个就是r740xd的马甲,但是r740xd是服务器,这个是存储,俩东西的维保条款是不一样的,我举个栗子,这回dell送我5年7×24小时服务+4小时上门,raid如果坏盘需要恢复数据管恢复,如果买服务器这个维保就是要单花钱的。再有就是有人说这个存储贵,首先你去看看群晖威联通12盘以上的存储多钱,在看看3240在dell官网的报价,一般来说你实际购买价格是dell官网报价的60%-70%,如果量大50%也是有可能的。而且群晖威联通在国内有维保? 从实践角度来讲,你会发现做为存储使用最后也就是用smb和iscsi功能。其他nas里花里胡哨的功能只要不是linux原生功能都不好使。最后就是使用成本,我这没有专职机房网管,北京请个靠谱网管1个月怎么都得8000-10000吧,虽然我一直负责机房但是也不能天天盯着。现在只要存储上不去,员工直接奔机房打开kvm看系统能不能进,不能进直接dell电话走起。

综合来看,买dell太tm便宜了

您需要登录后才可以回帖 登录 | 注册

本版积分规则

快速回复 返回顶部