我有以下设置。7 个节点,假设它们被调用gauss1
到gauss7
. gauss1
我在to之间建立了稳定的连接gauss6
。只是gauss7
在制造麻烦。
# ibnodes
Ca : 0x0002c90300f2eef0 ports 2 "gauss1 mlx4_0"
Ca : 0x0002c90300f2ef20 ports 2 "gauss2 mlx4_0"
Ca : 0x7cfe900300be5350 ports 1 "gauss3 mlx4_0"
Ca : 0x7cfe900300be5170 ports 1 "gauss4 mlx4_0"
Ca : 0x7cfe900300be51a0 ports 1 "gauss5 mlx4_0"
Ca : 0x248a070300d8f5c0 ports 1 "gauss6 mlx4_0"
Ca : 0xec0d9a03002baf50 ports 1 "gauss7 mlx4_0"
所以所有节点似乎都在交换机上注册。端口状态为gauss1
to gauss6
on ACTIVE
。就在gauss7
我有端口状态INIT
。
ibv_devinfo
高斯7 说:
hca_id: mlx4_0
transport: InfiniBand (0)
fw_ver: 2.42.5000
node_guid: ec0d:9a03:002b:af50
sys_image_guid: ec0d:9a03:002b:af53
vendor_id: 0x02c9
vendor_part_id: 4099
hw_ver: 0x0
board_id: MT_1100120019
phys_port_cnt: 1
port: 1
state: PORT_INIT (2)
max_mtu: 4096 (5)
active_mtu: 4096 (5)
sm_lid: 3
port_lid: 9
port_lmc: 0x00
link_layer: InfiniBand
我也安装opensm
在 gauss7 上,它说它在STANDBY
:
Feb 02 20:15:36 gauss7 opensm-launch[355306]: Using default GUID 0xec0d9a03002baf51
Feb 02 20:15:36 gauss7 OpenSM[355309]: Entering DISCOVERING state
Feb 02 20:15:36 gauss7 opensm-launch[355306]: Entering DISCOVERING state
Feb 02 20:15:36 gauss7 OpenSM[355309]: Entering STANDBY state
Feb 02 20:15:36 gauss7 opensm-launch[355306]: Entering STANDBY state
我的问题:如何设置端口gauss7
并ACTIVE
在所有 7 个节点之间建立连接?