分布式计算 标准差,信度 当一组数据无法完全加载到内存计算时,那我们就需要进行分布式计算,每台机器计算部分数据然后合成最后结果。例如典型的词频统计案例,但是当最后的结果不能根据每台机器的结果得出,那么就要拆分算法了。 ==拆分算法的标准:算法公式的粒度一定要能根据分布式的各个task处理得出== 拆 Read More
posted @ 2018-04-27 18:10 George_sz Views(633) Comments(0) Diggs(0) Edit