使用 Web 应用程序运行 Scala Map Reduce 代码

Question

我有一个特定的要求，我必须在 scala 中编写一些 hadoop MR 代码，然后使用网络应用程序触发这些代码，然后最后在网页中显示结果。

这可能吗？

如果是，有什么框架可以使用吗？

问候，

拉胡尔

Answer 1

你的问题不清楚。如果您指的是 Hadoop MR 作业，那么您应该查看 Scalding 和 Spark。

您的数据有多大？如果您的数据量不大，您应该能够对普通或并行 Scala 集合进行 MR。