2015年8月13日

Beeline known issues

摘要： If you use nohup myscript.sh , You beeline scripts may not work, Pay attention to this in your job. 阅读全文

posted @ 2015-08-13 09:44 tneduts 阅读(241) 评论(0) 推荐(0)

spark加载hadoop本地库的时候出现不能加载的情况要怎么解决呢？

摘要： hadoop shell运行的时候不会报这个错误，因为我已经重新在64位机上编译了源文件，并把so文件复制到hadoop的native目录下，而且环境变量也设置正确了，所以hadoop本身没有问题。 但在启动spark相关的shell时就会报这个问题。 经过查找，发现知乎上有人问了这个问题，我尝试照回答操作了，问题解决。 主要是jre目录下缺少了libhadoop.so和libsnappy.... 阅读全文

posted @ 2015-08-13 07:40 tneduts 阅读(693) 评论(0) 推荐(0)

导航