2015年8月13日

Beeline known issues

摘要: If you use nohup myscript.sh , You beeline scripts may not work, Pay attention to this in your job. 阅读全文

posted @ 2015-08-13 09:44 tneduts 阅读(227) 评论(0) 推荐(0) 编辑

spark加载hadoop本地库的时候出现不能加载的情况要怎么解决呢?

摘要: hadoop shell运行的时候不会报这个错误,因为我已经重新在64位机上编译了源文件,并把so文件复制到hadoop的native目录下,而且环境变量也设置正确了,所以hadoop本身没有问题。 但在启动spark相关的shell时就会报这个问题。 经过查找,发现知乎上有人问了这个问题,我尝试照回答操作了,问题解决。 主要是jre目录下缺少了libhadoop.so和libsnappy.... 阅读全文

posted @ 2015-08-13 07:40 tneduts 阅读(672) 评论(0) 推荐(0) 编辑

导航