代码改变世界

随笔档案-2015年05月

Hadoop 2.6.0编译on mac

2015-05-28 12:35 by 追风的蓝宝, 881 阅读, 收藏,
摘要: 花了一个晚上的时间弄了下hadoop的编译环境,碰到些错误,这里保存下。需要编译Hadoop,不但需要安装Maven,还需要安装protobuf安装Maven下载:apache-maven-3.0.5-bin.tar.gz解压:tar -zxvf apache-maven-3.0.5-bin.tar... 阅读全文

Hive的Metastore contains multiple versions

2015-05-21 09:31 by 追风的蓝宝, 5661 阅读, 收藏,
摘要: hive 客户端报错:Exception in thread "main" java.lang.RuntimeException: java.lang.RuntimeException: Unable to instantiate org.apache.hadoop.hive.metastore.H... 阅读全文

Hive的MoveTask错误

2015-05-18 22:55 by 追风的蓝宝, 11104 阅读, 收藏,
摘要: 最近在部署Hive上线,结果在线上线下同时出现了MoveTask报错的现象,虽然两者错误的日志以及错误信息一样,但是经过分析解决又发现两者的原因是不一样的。首先线下的错误日志:2015-05-18 18:53:09,679 ERROR [main]: exec.Task (SessionState.... 阅读全文

[转]hive中order by,distribute by,sort by,cluster by

2015-05-14 10:31 by 追风的蓝宝, 505 阅读, 收藏,
摘要: 转至http://my.oschina.net/repine/blog/296562order by,distribute by,sort by,cluster by 查询使用说明12345678910111213// 根据年份和气温对气象数据进行排序,以确保所有具有相同年份的行最终都在一个redu... 阅读全文