UCP请求超时
现象描述
测试OSU集合通信osu_iallgather和osu_iallgatherv时,当size大于32768,UCP request timeout。
可能原因
尝试使用开源Open MPI 4.1.1+Open UCX 1.15.0的环境运行指令,也会出现相同问题,说明问题发生在开源组件上。可能是由于bcopy进行分包,同时默认的接收队列长度不足,导致数据包未被接收。
恢复步骤
在运行命令中添加参数“-x UCX_RNDV_THRESH=8192”。
父主题: FAQ
测试OSU集合通信osu_iallgather和osu_iallgatherv时,当size大于32768,UCP request timeout。
尝试使用开源Open MPI 4.1.1+Open UCX 1.15.0的环境运行指令,也会出现相同问题,说明问题发生在开源组件上。可能是由于bcopy进行分包,同时默认的接收队列长度不足,导致数据包未被接收。
在运行命令中添加参数“-x UCX_RNDV_THRESH=8192”。