摘要: 今天在用hive进行查询练习,因为采用了条件查询,hive默认会把查询转变成mapreduce的job去执行,结果发现job一直僵在那里不动,找了好久都没发现问题,看hadoop的mast节点日志,也没有问题,最后查看node节点的日志发现了“INFO org.apache.hadoop.ipc... 阅读全文
posted @ 2014-10-08 17:45 筋头巴脑 阅读(5701) 评论(0) 推荐(0) 编辑
摘要: 今天安装了hbase想做下测试,结果发现在创建表时报错“can't get master address from zookeeper, zookeeper date = null”,大致是这样描述的,之后查看日志,发现hbase在启动zookeeper时确实报错了,查阅了网上的资料,说hbas... 阅读全文
posted @ 2014-08-06 14:59 筋头巴脑 阅读(2985) 评论(0) 推荐(0) 编辑
摘要: 今天使用http://www.cnblogs.com/xia520pi/archive/2012/05/16/2504205.html上的方式搭建一个基于Eclipse的mapreduce开发环境,在运行WordCount例子时出现错误,经过检查后才发现,装了hadoop2.0插件的Eclips... 阅读全文
posted @ 2014-08-05 15:49 筋头巴脑 阅读(570) 评论(0) 推荐(0) 编辑
摘要: 启动namenode,通过50070端口查看,发现livenode只有一个--namenode,查看datanode日志,发现有”Incompatible clusterIDs“错误,提示很明显,namenode和datanode的集群id不一致解决办法:找到core-site.xml配置文件,进入... 阅读全文
posted @ 2014-07-12 17:53 筋头巴脑 阅读(285) 评论(0) 推荐(0) 编辑