【发布时间】:2013-10-29 18:50:12
【问题描述】:
在旧版本的 hadoop 库(即 org.apache.hadoop.mapred.lib)中,有一个称为 IdentityMapper 的 Mapper 基本实现,它本质上将所有键值对传递给 Reducer。
但是,我发现在较新版本的 hadoop 库(org.apache.hadoop.mapreduce.lib)中,它 没有任何名为 IdentityMapper 的类(可以找到 Mapper 的所有子类 here)。
我能知道 IdentityMapper 是改名还是在新库中消失了吗?
如果答案是第二个,我能进一步知道为什么 IdentityMapper 会消失吗?这是否意味着 我们可以链接多个 Reducer 而无需在其间使用 Mapper?
【问题讨论】:
标签: java apache hadoop mapreduce