2021年12月
[源码解析] PyTorch 分布式(18) --- 使用 RPC 的分布式管道并行
摘要： 在前面的文章之中，我们已经学习了PyTorch 分布式的基本模块，接下来我们通过几篇文章来看看如何把这些模块应用到实践之中，顺便把PyTorch分布式逻辑整体梳理一下。本文介绍如何使用 RPC 来完成分布式管道并行。 阅读全文
posted @ 2021-12-20 10:03 罗西的思考 阅读(1546) 评论(0) 推荐(0)