随笔分类 -  Hadoop

Hadoop相关操作
hadoop集群启动及各服务启动命令
摘要：1)Hadoop的启动(先启动zookeeper) 3台都得启动 zookeeper /export/servers/zookeeper-3.4.9/bin/zkServer.sh start /export/servers/zookeeper-3.4.9/bin/zkServer.sh statu 阅读全文
posted @ 2019-10-10 16:02 xiaobinggun 阅读(9678) 评论(0) 推荐(0)
sqoop在创建job时如何免密输入
摘要：sqoop在创建job时，规定密码文件必须存放在HDFS上，并且权限必须设置成为是400。 创建sqoop job 在创建job时，使用--password-file参数 执行job 通过命令 阅读全文
posted @ 2019-09-28 14:29 xiaobinggun 阅读(642) 评论(0) 推荐(1)
HDFS的API操作
摘要：1:在Windows下配置Hadoop的运行环境 第一步：将hadoop2.7.5文件夹拷贝到一个没有中文没有空格的路径下面 第二步：在windows上面配置hadoop的环境变量： HADOOP_HOME，并将%HADOOP_HOME%\bin添加到path中 第三步：把hadoop2.7.5文件 阅读全文
posted @ 2019-09-26 23:36 xiaobinggun 阅读(598) 评论(0) 推荐(0)