摘要:本分介绍了Yarn的运行原理 阅读全文
posted @ 2019-12-28 18:45 数据科学实践者 阅读(355) 评论(0) 推荐(0) 编辑
摘要:本文介绍了如何将mackdoiwn文件转成word或者pdf文件 阅读全文
posted @ 2019-12-28 16:21 数据科学实践者 阅读(106) 评论(0) 推荐(0) 编辑
摘要:本文详细的介绍了Linux环境下的ZooKeeper安装步骤 阅读全文
posted @ 2019-12-19 13:17 数据科学实践者 阅读(201) 评论(0) 推荐(0) 编辑
摘要:错误描述: 解决方法:查看zookeeper-3.4.2/conf目录下 编辑zoo.cfg文件 发现第三行有问题修改 阅读全文
posted @ 2019-12-19 11:52 数据科学实践者 阅读(397) 评论(0) 推荐(0) 编辑
摘要:本文测试文本: tom 20 8000 nancy 22 8000 ketty 22 9000 stone 19 10000 green 19 11000 white 39 29000 socrates 30 40000 MapReduce中,根据key进行分区、排序、分组 MapReduce会按照 阅读全文
posted @ 2019-12-13 13:51 数据科学实践者 阅读(160) 评论(0) 推荐(0) 编辑
摘要:本介绍了Mapreduce自定义分区的实现 阅读全文
posted @ 2019-12-11 15:54 数据科学实践者 阅读(136) 评论(0) 推荐(0) 编辑
摘要:本文详细的介绍了Hadoop的hdfs原理和读写过程 阅读全文
posted @ 2019-12-10 19:29 数据科学实践者 阅读(75) 评论(0) 推荐(0) 编辑
摘要:Exception message: /bin/bash: line 0: fg: no job control 这个错误是 本地idea跨平台远程调试hadoop集群出现的,在使用windows调用Hadoop yarn平台的时候都会出现类似的错误 方法一: 去把集群中的mapred-site配置 阅读全文
posted @ 2019-12-04 11:19 数据科学实践者 阅读(130) 评论(0) 推荐(0) 编辑
摘要:本分是七月机器学习的课程 阅读全文
posted @ 2019-12-03 13:52 数据科学实践者 阅读(92) 评论(0) 推荐(0) 编辑
摘要:本文详细的介绍了Hadoop的Map和Reduce以及shuffle的详细步骤、源码分析 阅读全文
posted @ 2019-12-03 13:08 数据科学实践者 阅读(119) 评论(0) 推荐(0) 编辑