如何在android中搜索twitter.com/search并解析数据

Question

我一直在处理 android 中的 twitter 应用程序。我使用了 Oauth 身份验证并搜索了给定的关键字。

问题是速率限制。我无法执行很多搜索。

经过一番搜索后，我发现了那个链接：Using the Search API

上面写着：

作为用户，最好的办法是从 twitter.com/search 执行搜索

然后我在 Google Play Twitter Search 中找到了一个应用程序，它甚至不使用身份验证并执行无限搜索。

我怀疑Twitter Search 开发者是否使用了这种逻辑。

• 是否可以直接从twitter.com/search 进行搜索？
• 如果是，我应该遵循哪些库/方法/方式？

Answer 1

是否可以直接从 twitter.com/search?

技术上是的，但应尽可能避免这种情况。您必须解析 HTML，这是一个既缓慢又容易出错的过程。

我应该遵循哪些库/方法/方式？

您应该坚持使用官方 API。我意识到这个速率限制有点碍事，但我相信你可以通过减少对 API 的调用总量和更有效地使用每个调用来缓解这个问题。你必须记住，这是官方的 Twitter API。 Twitter 肯定希望 Twitter 应用程序既好又好，虽然每小时 100 个呼叫的速率限制似乎很低，但通常应该绰绰有余。如果无论如何达到速率限制，您只需要一些适当的错误处理。我知道大多数第三方推特应用程序在达到速率限制时都会冻结其内容。将显示一个错误，通知用户他无法再更新一个小时，但他仍然可以像以前一样继续使用应用程序，并使用之前调用的所有缓存数据。

由于您还没有发布任何代码，我不知道还能告诉您什么，请尽量对每个电话保持明智。尽可能使用缓存数据，仅在绝对必要时执行 API 调用。

---

编辑：我认为从 https://mobile.twitter.com/search 解析数据对你来说是最好的。只需查找类为 timeline 的 div。此 div 中的每个 <table /> 都包含一条推文。解析应该不难。

我使用HtmlCleaner 对其进行了测试：

HtmlCleaner cleaner = new HtmlCleaner();
TagNode root = cleaner.clean("https://mobile.twitter.com/search?q=asdf");
... // Filter out div with class "timeline"
List<? extends TagNode> tweets = timeLineDiv.getElementListByAttValue("class", "tweet", false, true);