2021年12月
[源码解析] PyTorch 分布式 Autograd (3) ---- 上下文相关
摘要： 我们已经知道 dist.autograd 如何发送和接受消息，本文再来看看如何其他支撑部分，就是如何把发送接受两个动作协调起来，如何确定每个发送/接受节点，如何确定每一个消息交互Session。 阅读全文
posted @ 2021-12-01 21:08 罗西的思考 阅读(831) 评论(0) 推荐(0)