【发布时间】:2014-02-08 21:35:14
【问题描述】:
我正在一个有 3 个节点的 Multinode 集群上执行我的 MapReduce 程序。执行时,在 MAP 100% 降至 16% 后出现错误 "Status:failed Too many fetch failures",那么为什么会出现此错误?
我该如何解决这个问题?
【问题讨论】:
标签: map hadoop mapreduce cluster-computing hdfs
我正在一个有 3 个节点的 Multinode 集群上执行我的 MapReduce 程序。执行时,在 MAP 100% 降至 16% 后出现错误 "Status:failed Too many fetch failures",那么为什么会出现此错误?
我该如何解决这个问题?
【问题讨论】:
标签: map hadoop mapreduce cluster-computing hdfs
错误的原因可能是 DNS 问题、映射器端的 http 线程或导致连接获取映射输出失败的 JVM 错误。请看这个http://archive.apachecon.com/na2013/presentations/27-Wednesday/Big_Data/14:45-7_Deadly_Hadoop_Misconfigurations-Kathleen_Ting/HadoopTroubleshootingApacheCon.pdf。您可以在第 24 张幻灯片上找到解决方案。
希望对你有帮助
【讨论】: