随笔分类 -  SPARK

摘要：1.定义 【aggregate】 /** * Aggregate the elements of each partition, and then the results for all the partitions, using * given combine functions and a neutral "zero value". This f... 阅读全文

摘要：在应用spark时，经常要获取任务的执行进度，可以参照jobProgressListener的设计来完成该功能。 以下代码仅供参考，欢迎交流。 效果显示： 代码： 博客记录是个好习惯，计划一下以后几期的博客。 由浅入深，围绕机器学习的主题，来学习介绍。 模型评估与选择 线性模型 决策树 神经网络 支 阅读全文