[RDMA] UD模式下ibv_post_send返回ENOMEM,但sq并没有满

[RDMA] UD模式下ibv_post_send返回ENOMEM,但sq并没有满

我创建了一个RDMA的UD qp,其max_send_wrmax_recv_wr都是32。在实际使用中,我保证最多只有16个已发送但对端未接受到的消息。然而,在我发送32个消息后,ibv_post_send报错,返回了ENOMEM。网上说这通常是由于sq满了。但我之前发送的32个消息明明已经发送成功了,对端已经收到了,理论上sq应该是空的,为什么会告诉我满了呢?

原因可能在于我的所有消息都是send_flags=0,即没有IBV_SEND_SIGNALED标记。在我为消息加入IBV_SEND_SIGNALED标记后,ibv_post_send就不再报错了。难道是因为没有IBV_SEND_SIGNALED就不会清空sq?总之,我选择在发送的消息中,每隔几个就加入一个IBV_SEND_SIGNALED。这样就没有再报错了。

posted @ 2024-12-28 16:33  CQzhangyu  阅读(97)  评论(0)    收藏  举报