如何在 Hadoop 1.2.1 上安装 snappy

【问题标题】：How to install snappy on Hadoop 1.2.1如何在 Hadoop 1.2.1 上安装 snappy
【发布时间】：2015-09-16 01:56:24
【问题描述】：

是 snappy 与 hadoop 集成还是需要与 hadoop 1.2.1 单独安装。我在 mapred-site.xml 文件中添加了以下属性以压缩我的地图文件。

<property>
  <name>mapred.compress.map.output</name>  
  <value>true</value>
</property>
<property>
  <name>mapred.map.output.compression.codec</name>  
  <value>org.apache.hadoop.io.compress.SnappyCodec</value>
</property>

它给出了 snappy_library not loaded 的错误。我想我必须在使用编解码器之前安装它。请帮助。

【问题讨论】：

标签： hadoop snappy

【解决方案1】：

根据 Cloudera，如果您通过 tarball 安装 hadoop，那么我们必须单独安装，请查看 this。

【讨论】：

hadoop@HadoopPseudoVM:~/snappy-1.0.3$ CFLAGS="-O2 -DNDEBUG" CXXFLAGS="-O2 -DNDEBUG" ./configure --prefix=$(readlink -m /home /hadoop/snappy-1.0.3) 检查与 BSD 兼容的安装... /usr/bin/install -c 检查构建环境是否正常... 是检查线程安全 mkdir -p... / bin/mkdir -p 检查 gawk... 不检查 mawk... mawk 检查是否 make 设置 $(MAKE)... 不检查构建系统类型... ./config.guess: 无法猜测系统类型配置：错误：无法猜测构建类型；你必须指定一个