2017年7月31日
【大数据系列】windows下连接Linux环境开发
摘要： 一、配置文件 1.core-site.xml 2、hdfs-site.xml 3、yarn-site.xml 4、slaves 二、建立本地连接 三、创建MapReduceProject 1、File -- new - Other --MapReduceProject 2、建立测试文件 3、run 阅读全文
posted @ 2017-07-31 18:33 霓裳梦竹 阅读(464) 评论(0) 推荐(0)
【大数据系列】常用命令
摘要： 1、格式化系统 hadoop namenode -format 2、put 上传 （） hadoop fs -put //hdfs dfs -put完全一样 hdfs dfs(和hadoop fs等价) eg:hadoop fs -mkdir -p /user/hadoop/data hdfs df 阅读全文
posted @ 2017-07-31 10:23 霓裳梦竹 阅读(658) 评论(0) 推荐(0)
【大数据系列】hadoop脚本分析
摘要： 一、start-all.sh hadoop安装目录/home/hadoop/hadoop-2.8.0/ libexec/hadoop-config.sh 设置变量 sbin/start-dfs.sh 启动hdfs sbin/start-yarn.sh 启动yarn 二、sbin/start-dfs. 阅读全文
posted @ 2017-07-31 10:01 霓裳梦竹 阅读(601) 评论(1) 推荐(0)