Gobblin - 如何从 Facebook 获取帖子

Question

我一直在研究 Gobblin，目前我在使用 Gobblin 从 Facebook 获取帖子时遇到了困难。我在互联网上找不到任何连接示例，或者我可能搜索错误。

我正在考虑将 restfb 集成到 Gobblin，但是在 Gobblin 中，有一个带有连接器、源和提取器的 RestAPI 类，我正在努力寻找一种将这些组合在一起的方法。您能否为我提供有关如何实施此操作的简单指南或指出正确的说明？非常感谢您提前。

Answer 1

我正在做同样的事情，我已经使用 java 代码使用 graph-facebook api 提取了我的数据。我最近开始使用 gobblin 来提取数据。一开始我在调试模式下运行 gobblin 以了解流程如何，我认为您绝对应该尝试这样做。现在我将数据作为 json 对象获取，并使用转换器、构建器、写入器将数据传输到 HDFS。 如果您想了解如何在调试模式下运行 gobblin，您可以在下面发表评论，我很乐意提供帮助。