Hadoop出现 native snappy library not available: SnappyCompressor has not been loaded的解决办法

我目前测试环境是Hadoop 2.7.1, 搭建群集之后经常出现错误“native snappy library not available: SnappyCompressor has not been loaded”, 我目前是两个结点, 单台是没有问题的, 

看了log之后也找不到什么原因, 烦恼很久, 后面发现如果 是两台结点, 会不会是读取hdfs上面的lib文件, 而不是读取本地的lib呢, 我就试了下, 以下是tez在hdfs上的截图

扔上去后, 居然跑成功了, 试分析了下, 应该是我默认的文件类型是hdfs的原因, 在core-site.xml可以进行配置fs.defaultFS

posted @ 2016-01-19 10:58  一只老鼠  阅读(1439)  评论(0编辑  收藏  举报