【问题标题】:Map reduce word count地图减少字数
【发布时间】:2017-10-31 05:17:42
【问题描述】:

如何使用任一方法搜索特定单词

1) Map Reduce WC 程序 - Java 代码或 2) Hive 的字数统计

例如:下面是我的文件

Hello my name is Jammy
Jammy is the best
Jammy likes football  

我想搜索“Jammy”这个词出现了多少次..请建议

【问题讨论】:

  • 如您所知,hive 遵循列结构。

标签: hive mapreduce word-count


【解决方案1】:

请使用集成测试查找字数统计示例。

http://bytepadding.com/big-data/map-reduce/word-count-map-reduce

如果您只需要输出中的特定单词,您可以在 Map 阶段添加过滤器。

 if (tokenizer.nextToken().equals("Jammy")){
          word.set(tokenizer.nextToken());
 }

【讨论】:

    猜你喜欢
    • 1970-01-01
    • 2021-06-19
    • 2019-09-28
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    • 2020-08-12
    • 1970-01-01
    • 2015-07-30
    相关资源
    最近更新 更多