08 2023 档案
摘要:(1)本周学习MapReduce中的排序和分组总结: 本周我花了20小时学习Hadoop中MapReduce中的排序和分组操作。在Hadoop默认的排序算法中,只会针对key值进行排序。在Hadoop中的默认分组规则中,也是基于Key进行的,会将相同key的value放到一个集合中去 在学习阶段,我
阅读全文
摘要:本周学习Combiner总结: 在MapReduce编程模型中,在Mapper和Reducer之间有一个非常重要的组件,它解决了上述的性能瓶颈问题,它就是Combiner 本周我花了15小时学习Hadoop中的Combiner的使用。 在学习阶段,我用了8小时来阅读相关文档和教程,了解Combine
阅读全文
摘要:(1)本周学习自定义类型处理手机上网日志总结: 本周我花了20小时学习如何在Hadoop中处理手机上网日志并创建自定义数据类型。学会如何通过map-reduce实现统计不同手机号用户的上网流量信息?通过上表可知,第6~9个字段是关于流量的信息,也就是说我们需要为每个用户统计其upPackNum、do
阅读全文
摘要:(1)本周学习MapReduce总结: 本周我花了25小时学习MapReduce相关知识。 在学习阶段,我用了15小时来阅读有关MapReduce的文档,了解其概念、工作原理以及Hadoop中的实现方式。 我还花了7小时编写和测试与MapReduce相关的代码,主要是使用Java编写一些MapRed
阅读全文
摘要:《天道》里面有很多关于高人思维方式的东西,揭示的智慧很多,充满了浓浓的的哲学文化意味,都值得反复品味,仔细推敲,看过的人无一不被其中的思想所震撼。是创业奇才、商业精英必看的经典之作。电视剧取名《天道》意境高远:天之道,损有余而补不足;人之道,损不足以奉有余。作者对强势文化的呼喊,就像当年鲁迅先生给自
阅读全文

浙公网安备 33010602011771号