摘要: 背景 海量且优质的数据集是一个好的 AI 模型的基石之一,如何存储、管理这些数据集,以及在模型训练时提升 I/O 效率一直都是 AI 平台工程师和算法科学家特别关注的事情。不论是单机训练还是分布式训练,I/O 的性能都会显著影响整体 pipeline 的效率,甚至是最终的模型质量。 我们也逐渐看到容 阅读全文
posted @ 2021-09-18 16:15 JuiceFS 阅读(332) 评论(0) 推荐(0)