【发布时间】：2011-03-23 09:42:46
【问题描述】：
由于网站抓取 Google、Bing 等违反了他们的服务条款，我想知道是否有任何搜索引擎允许抓取结果？
【问题讨论】：
标签： screen-scraping search-engine
【发布时间】：2011-03-23 09:42:46
【问题描述】：
【讨论】：
-
Google 每天只允许 100 次查询，因此完全没有意义。雅虎 API 也是有限的。我必须检查 Bing，但我刚刚阅读了 Yahoo TOS，他们似乎并没有禁止抓取，所以它们可能是要走的路（尽管它们是由 Bing 驱动的，所以是 IDK）。欢迎任何其他建议。
-
Google 搜索 API 也完全不准确，与实际结果不符。如果他们真的给你准确的结果，搜索引擎优化将有一个现场的一天，而谷歌将受到更多的挑战。
您实际上可能正在寻找Google JSON Search API：它允许您从您的程序中合法地搜索 Google，并且比屏幕抓取更易于使用。
【讨论】：
-
与上面指出的 JSON API 存在相同的问题：无用的低每日限制，并且与国家谷歌网站的实际谷歌结果不匹配。
-
现在也已弃用，取而代之的是（极其昂贵的）自定义搜索 API。