PCEVA,PC绝对领域,探寻真正的电脑知识
开启左侧

想上Mellanox ConnectX MNPA19-XTR单口万兆以太网光纤卡

[复制链接]
doymll 发表于 2018-3-23 15:58 | 显示全部楼层
100-200m的距离.有没必要上光口.还是好的6类线就行
杰迪武士 发表于 2018-3-26 22:53 | 显示全部楼层
一个字,买买买
红色狂想  楼主| 发表于 2018-3-28 23:54 | 显示全部楼层
doymll 发表于 2018-3-23 15:58
100-200m的距离.有没必要上光口.还是好的6类线就行

这个就是为了双机直连对拷数据的,别的设备也用不了这么高的带宽
红色狂想  楼主| 发表于 2018-4-3 00:03 | 显示全部楼层

问一下,你的Gen8安装Mellanox ConnectX MNPA19-XTR光纤卡后,登录iLO4在System Information  -  NIC Information页面下能看到这块网卡的信息吗?

本帖子中包含更多资源

您需要 登录 才可以下载或查看,没有帐号?注册

x
杰迪武士 发表于 2018-4-3 20:46 | 显示全部楼层
红色狂想 发表于 2018-4-3 00:03
问一下,你的Gen8安装Mellanox ConnectX MNPA19-XTR光纤卡后,登录iLO4在System Information  -  NIC Inf ...

能啊

本帖子中包含更多资源

您需要 登录 才可以下载或查看,没有帐号?注册

x
红色狂想  楼主| 发表于 2018-4-4 00:05 | 显示全部楼层

192.168.11.2是不是就是Mellanox ConnectX MNPA19-XTR网卡?怎么没有设备名称啊,你的其它3个网口没使用吗?
xudaiqing 发表于 2018-4-4 20:22 | 显示全部楼层

图上并没有啊?上面两个是ilo的,下面两个是集成的
红色狂想  楼主| 发表于 2018-4-4 20:34 | 显示全部楼层
xudaiqing 发表于 2018-4-4 20:22
图上并没有啊?上面两个是ilo的,下面两个是集成的

iLO只有一个网卡才对啊,难道他把Mellanox光纤网卡的端口设成iLO远程控制和网络通讯复用了?
xudaiqing 发表于 2018-4-4 20:45 | 显示全部楼层
红色狂想 发表于 2018-4-4 20:34
iLO只有一个网卡才对啊,难道他把Mellanox光纤网卡的端口设成iLO远程控制和网络通讯复用了?  ...

ilo有两个网卡,一个独立的,一个是和集成网卡共享端口的。
红色狂想  楼主| 发表于 2018-4-6 23:45 | 显示全部楼层
xudaiqing 发表于 2018-4-4 20:45
ilo有两个网卡,一个独立的,一个是和集成网卡共享端口的。

不知道Mellanox光纤网卡能否与Gen8板载的网卡完美并存,端口间不会有冲突吧?
eterfinity 发表于 2018-4-8 13:51 | 显示全部楼层
本帖最后由 eterfinity 于 2018-4-8 14:06 编辑

我已经上了 非常好


这个卡option rom是flexboot 也就是ipxe
因此  只要dhcp服务器设置option17 为iscsi 根的root-path  格式为:  iscsi:192.168.130.101::::iqn.xxxxxxxxxxxx:xxxxxxxxx  不需要再弄tftp服务器
然后就能直接 iscsi sanboot  
上图是iscsiboot后win2016 系统自带网卡驱动全默认值 c盘跑分   双卡直连
拿来做iscsi target server的同样是win2016  cpu是最弱鸡的e3-1220Lv3  单通道ddr3L 4GB内存  intel 750 400G AIC, iscsi 用的动态vhdx文件,
利用hyper-v外部交换机,避免掉网卡直连的尴尬,使iscsi与dhcp service永久处于在线监听状态
所以各个环节都使性能打了折扣,请无视4kQD64成绩
此外   这个跑分正是gen8里面跑出来的


编辑一下,补一张iscsi server使用单块 sf2281主控240G固态的成绩



本帖子中包含更多资源

您需要 登录 才可以下载或查看,没有帐号?注册

x

评分

参与人数 1绝对值 +1 收起 理由
红色狂想 + 1 很给力! 干货满满,我慢慢消化 \(^o^)/~.

查看全部评分

eterfinity 发表于 2018-4-8 14:10 | 显示全部楼层
909648183 发表于 2018-3-17 19:04
都支持RDMA了,直接映射为本地磁盘操作就行了,拷文件都不需要

没错  创建存储池  设置读写权限在台式机 直接上线使用
eterfinity 发表于 2018-4-8 14:14 | 显示全部楼层
本帖最后由 eterfinity 于 2018-4-8 14:16 编辑
红色狂想 发表于 2018-4-6 23:45
不知道Mellanox光纤网卡能否与Gen8板载的网卡完美并存,端口间不会有冲突吧? ...

十分完美  一点也不冲突
但是有一个细节
就是受HP主板固件的影响,这个卡option rom加载后, 端口上线比在普通电脑慢3-6秒左右
这6秒导致向win自带的dhcp server请求ip,10次有8次直接timeout
想要sanboot的话, 服务端只能换响应率更高的dhcp server, 比如tftpd64

eterfinity 发表于 2018-4-8 14:18 | 显示全部楼层
在nas与台机各上一块这个卡,直连 用iscsi做无盘台机
就能避免台式机重复的硬盘投资了
nas里面nvme satassd NLSAS搭出来的分层存储终于有意义了。
红色狂想  楼主| 发表于 2018-4-8 14:37 | 显示全部楼层
eterfinity 发表于 2018-4-8 14:10
没错  创建存储池  设置读写权限在台式机 直接上线使用

必须创建存储池吗,不能直接用Gen8的HP Dynamic Smart Array B120i Controller组RAID 10吗?
eterfinity 发表于 2018-4-8 14:41 | 显示全部楼层
利用网卡RDMA去拉别的机器的硬盘过来用,得创建存储池,可以裸盘建,也可以先做了物理卡的raid,再把vd加入存储池
此外随便怎么用
红色狂想  楼主| 发表于 2018-4-8 14:48 | 显示全部楼层
eterfinity 发表于 2018-4-8 14:14
十分完美  一点也不冲突
但是有一个细节
就是受HP主板固件的影响,这个卡option rom加载后, 端口上线比在普 ...

option rom是指主板bios选项配置吗?
Mellanox这卡装在Gen8里运行温度表现怎么样,会不会导致风扇提速?
你也是在那家店铺买的吗,他家没有2U半高挡片,你是怎么解决的?
eterfinity 发表于 2018-4-8 14:57 | 显示全部楼层
本帖最后由 eterfinity 于 2018-4-8 15:01 编辑
红色狂想 发表于 2018-4-8 14:48
option rom是指主板bios选项配置吗?
Mellanox这卡装在Gen8里运行温度表现怎么样,会不会导致风扇提速?
...

option rom 就是按ctrl+B进入网络启动功能,或者bios里设置网卡启动要用到.
温度可以忽略,常跑30%-50%带宽, 不怎么烫

我是去年8月就买回来用了  那时候要贵点,店铺名字前5个字看图,2u档片送了我两个,好像是特地为洋垃圾车出来的,光滑舒适的材料手感

此外  纯万兆交换机可以选dell8024f和它的山寨机xx7024

本帖子中包含更多资源

您需要 登录 才可以下载或查看,没有帐号?注册

x

评分

参与人数 1绝对值 +1 收起 理由
红色狂想 + 1 很给力!

查看全部评分

红色狂想  楼主| 发表于 2018-4-8 15:03 | 显示全部楼层
eterfinity 发表于 2018-4-8 14:18
在nas与台机各上一块这个卡,直连 用iscsi做无盘台机
就能避免台式机重复的硬盘投资了
nas里面nvme satassd ...

我就是在找这种东西,iscsi做无盘工作站才叫爽,我在隔壁看到有人说易趣上又出现一批100GE的新货 Mellanox CX456A ConnectX-4 EDR + 100GbE http://www.ebay.com/itm/Mellanox ... 00GbE-/282899216036
搭配3m 100GbE /56GbE ETHERNET MELLANOX MCP1600-C003 COPPER CABLE DIRECT CONNECT EDR这款线,详见这篇回帖:https://www.chiphell.com/forum.p ... 24&pid=38614702
eterfinity 发表于 2018-4-8 15:12 | 显示全部楼层
红色狂想 发表于 2018-4-8 15:03
我就是在找这种东西,iscsi做无盘工作站才叫爽,我在隔壁看到有人说易趣上又出现一批100GE的新货 Mellano ...

日,俺需要静静,还好只买得到SDR/DDR的IB交换机
https://www.ebay.com/itm/QLOGIC-48-PORT-SDR-DDR-INFINI-BAND-SWITCH-9040-ENCLOSURE-euz/271538616757?hash=item3f38f679b5:g:PZoAAOSw91NTtFx6
您需要登录后才可以回帖 登录 | 注册

本版积分规则

快速回复 返回顶部