摘要: 为什么 list(range) 比 [i for i in range()] 快? t0 = time.time() list(range(100000)) print(time.time()-t0) >>> 0.00400090217590332 t0 = time.time() [i for i 阅读全文
posted @ 2020-09-03 14:50 鱼与鱼 阅读(599) 评论(0) 推荐(0) 编辑
摘要: 梯度下降怎么并行的? mini-batch Gradient Descent 并行化SGD LR怎么并行的? 按行并行 将数据按行(样本)划分到多个机器,每个机器负责计算部分样本,最后相加。 按列并行 将数据按列(特征)进行划分,每个机器负责计算部分特征,将不同机器计算结果相加。 假设M个样本,每个 阅读全文
posted @ 2020-09-03 09:58 鱼与鱼 阅读(314) 评论(0) 推荐(0) 编辑