【发布时间】:2019-08-14 17:37:02
【问题描述】:
任何人都可以帮助我处理 Java 等价物吗?
wordCountRDD.saveAsNewAPIHadoopFile(outputFile,classOf[Text],classOf[IntWritable],classOf[TextOutputFormat[Text,IntWritable]])
我在下面尝试过:但它在 TextOutputFormat(Text,IntWritable) 处给了我错误 ..
wordCountRDD.saveAsNewAPIHadoopFile(
output,
Text.class,
IntWritable.class,
TextOutputFormat<>(Text,IntWritable)
context.hadoopConfiguration());
【问题讨论】:
-
你能解释一下它的作用吗?我知道 Java,但我不知道 Scala。
-
TextOutputFormat<>(Text,IntWritable)应该做什么? -
当然,TextOutputFormat就是将输出写入键值对,其中key是Text,value是IntWritable
-
我不确定语法,我应该在哪里添加新的?
-
感谢您的快速回归!
标签: java scala apache-spark