摘要: 1、上传安装包到master并解压 tar -xvf zookeeper-3.4.6.tar.gz -C/usr/local/soft 2、配置环境变量 vim /etc/profile export ZOOKEEPER_HOME=/usr/local/soft/zookeeper-3.4.6 ex 阅读全文
posted @ 2021-09-23 20:47 lmandcc 阅读(10) 评论(0) 推荐(0) 编辑
摘要: 1.Mapreduce操作不需要reduce阶段 1 import org.apache.hadoop.conf.Configuration; 2 import org.apache.hadoop.fs.FileSystem; 3 import org.apache.hadoop.fs.Path; 阅读全文
posted @ 2021-09-23 20:25 lmandcc 阅读(70) 评论(0) 推荐(0) 编辑
摘要: 1.MapReduce概念 1)MapReduce是一种分布式计算模型,由Google提出,主要用于搜索领域,解决海量数据的计算问题. 2)MapReduce是分布式运行的,由两个阶段组成:Map和Reduce,Map阶段是一个独立的程序,有很多个节点同时运行,每个节点处理一部分数据。Reduce阶 阅读全文
posted @ 2021-09-23 00:30 lmandcc 阅读(179) 评论(0) 推荐(1) 编辑