我目前测试环境是Hadoop 2.7.1, 搭建群集之后经常出现错误“native snappy library not available: SnappyCompressor has not been loaded”, 我目前是两个结点, 单台是没有问题的, 

看了log之后也找不到什么原因, 烦恼很久, 后面发现如果 是两台结点, 会不会是读取hdfs上面的lib文件, 而不是读取本地的lib呢, 我就试了下, 以下是tez在hdfs上的截图

Hadoop出现 native snappy library not available: SnappyCompressor has not been loaded的解决办法

扔上去后, 居然跑成功了, 试分析了下, 应该是我默认的文件类型是hdfs的原因, 在core-site.xml可以进行配置fs.defaultFS

相关文章:

  • 2022-12-23
  • 2021-11-03
  • 2021-11-17
  • 2021-12-14
  • 2021-10-02
  • 2021-07-04
  • 2021-09-29
  • 2021-08-18
猜你喜欢
  • 2021-04-23
  • 2022-12-23
  • 2022-12-23
  • 2021-11-23
  • 2022-12-23
  • 2021-06-28
  • 2021-04-02
相关资源
相似解决方案