【问题标题】:GetTwitter stops fetching data from Twitter after few hours几个小时后,GetTwitter 停止从 Twitter 获取数据
【发布时间】:2020-01-30 08:36:26
【问题描述】:

我在 Apache Nifi 中使用 GetTwitter 处理器来处理使用 UserId 的实时推文。最初它工作正常,但几个小时后没有从 Twitter 检索到任何推文。 请问我为什么会遇到这个问题。

注意: 因为我使用 25000 个用户 ID 从他们那里获取实时推文。正如我提到的一些博客,它显示 5000 UserId 是 GetTwitter 处理器的最大限制。我使用 5 个具有相同访问凭证的 GetTwitter 处理器将 25000 个用户 ID 分成 5 个部分。

【问题讨论】:

    标签: apache twitter apache-nifi tweets


    【解决方案1】:

    听起来您遇到了速率限制问题。 Twitter 的相关文档可以在 https://developer.twitter.com/en/docs/basics/rate-limiting

    找到

    【讨论】:

    • 可以确认,如果您使用 Nifi 从 twitter 之类的 API 中拉取数据,但它突然停止工作......它总是在挤压您。
    猜你喜欢
    • 1970-01-01
    • 2012-12-20
    • 2014-09-23
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    • 2018-12-19
    • 1970-01-01
    相关资源
    最近更新 更多