看了楼主的帖子感觉受益匪浅啊。我这两天爬帖了解了一下相关知识,专门注册帐号,想向楼主请教几个问题: 1.我在官网上看了,mellanox好像有两种卡(IC卡不考虑),vpi系列的ib卡和en系列的万兆网卡,都是属于connectx系列的。 淘宝connectx 2代双口40Gb的ib卡(型号MHQH29B-XTR,QSFP接口)要500块,而connectx 2代单口10Gb的en卡(型号MNPA19-XTR,SFP+接口)要200块钱,网上有qsfp转4sfp+接口线,价格太混乱了,便宜的5米不到300块,也有1米1000块的.. 保守点下面就按3米500的算吧。 如果用这种方式的话,1个ib卡加4个en卡再加一根转接线总共1800块,可以接4个主机了,ib卡是双口的,所以还可以再加一跟线和4个单口en卡,就可以扩展到8台, 3100块,但考虑到同长度的线价格高的(可能)质量越好,而机器越多时布线对线长度也越高,可以买更长的转接线,总共4k以内拿下妥妥的8主机全万兆通道。服务器可以插3个双口的ib卡,这样的话就可以扩展至24个客户端了,总共1万2搞定全部连接问题。而且全是connectx2的卡,驱动问题也解决了。 不知道这种ib卡直连en网卡方案可行不?我没接触过万兆网卡,对接口硬件实体还不太清楚,目前对淘宝上这几个二手卡的质量和稳定性也还不确定。研究了几天,作为一个穷逼目前没余钱买来实验,暂时也用不到这个,但以后可能会有用。 2.我简单研究了下1,2代connectx的命名规则,MH开头的都是ib卡,MN开头的都是en卡。楼主用的具体是什么型号的卡?此外如果两台机器都是双口卡,那么彼此用双线互联,速度会不会提升一倍?需要什么软件设置吗?淘宝上(MHGH29-XTC)一代双口20Gb,现在才90块,白菜价了,不知道靠谱不。这个是hca卡,跟hba有啥区别?可以一样用吗? 3.mellanox家驱动的问题。这里只说Windows版(WinOF)。如果是2代卡就不用纠结驱动问题,保底可以用4.8版,server2012+win8.1就可以完美RDMA了。先看这个官网链接 http://ch.mellanox.com/page/winof_matrix?mtag=windows_sw_drivers 官网上从5.1版才开始支持win10,而且支持3代卡,不支持1代卡,奇怪的是2代卡没说是否支持。4.8版本及以下均支持2代卡,但是只有4.8区分了服务器版和客户版,客户端支持win8.1和win7,4.2-4.7都只支持服务器系统,然而继续往下直到3.2版又支持客户系统,而且只有Win7。此外不知道什么原因官网上并没有列出所有版本下载地址(包括3.1版) 我的主要疑问是:你想升到3.1版驱动,而3.2都只支持win7,3.1版不支持Win10是肯定的了,而你们的主机都是win10,那现在你的主机上装了驱动吗?没装驱动那卡就不能用吧?如果装了,是不是装的卖家给你的驱动?如果他给的驱动能用在win10上,为啥还想要折腾新的驱动?是不是卖家版驱动支持win10但对RDMA支持不好?
问题有点多,望不吝赐教哈,谢谢!
|