随笔分类 -  Hadoop

eclipse 连接不上HBase集群
摘要：java.io.IOException: Failed to get result within timeout, timeout=60000ms 解决方案 在本地hosts文件（如C:\Windows\System32\drivers\etc\hosts）里加上HBase集群上的hosts配置即可 阅读全文
posted @ 2018-02-02 14:05 PyJava老鸟 阅读(599) 评论(0) 推荐(0)
Hadoop hdfs yarn HA
摘要：Master MasterStandBySlave1 Slave2 Slave3Zookeeper安装在Slave1,Slave2,Slave3上->启动zookeeper ./zkServer.sh start 查看zookeeper状态：./zkServer.sh status， 正确的状态是一 阅读全文
posted @ 2018-01-31 10:55 PyJava老鸟 阅读(118) 评论(0) 推荐(0)
hadoop手动启动jobhistory
摘要：主机10020端口连接不上，应该是hadoop集群中datanode访问namenode的10020端口的问题，使用10020端口是jobhistory服务，在检查配置文件mapred-site.xml未发现错误 <property> <name>mapreduce.jobhistory.addre 阅读全文
posted @ 2018-01-16 10:54 PyJava老鸟 阅读(582) 评论(0) 推荐(0)
hadoop错误提示 exitCode: 1 due to: Exception from container-launch.
摘要：mapred-site.xml中配置文件中的一些属性不支持了会报出这个错误 在8088端口中查看container log 可以看到这个错误 <property> <name>fs.AbstractFileSystem.hdfs.impl</name> <value>org.apache.hadoo 阅读全文
posted @ 2018-01-15 10:35 PyJava老鸟 阅读(426) 评论(0) 推荐(0)
no filesystem for scheme hdfs
摘要：2.8.2 出现这个错误的原因是没有正确引入jar包，缺少hadoop-hdfs-client-2.8.2.jar 阅读全文
posted @ 2018-01-10 11:25 PyJava老鸟 阅读(195) 评论(0) 推荐(0)
hadoop安装文件
摘要：https://github.com/zhongzai/hadoop-.git 阅读全文
posted @ 2018-01-09 14:37 PyJava老鸟 阅读(108) 评论(0) 推荐(0)
hadoop 结构的变化
摘要：http://hadoop.apache.org/docs/r2.4.1/ Apache Hadoop 2.4.1 Apache Hadoop 2.4.1 consists of significant improvements over the previous stable release (h 阅读全文
posted @ 2017-11-17 09:48 PyJava老鸟 阅读(181) 评论(0) 推荐(0)