【问题标题】:How can i crawl search engine result如何爬取搜索引擎结果
【发布时间】:2012-12-29 10:30:07
【问题描述】:

建立一个页面(asp.net)来抓取搜索引擎结果然后显示在我自己的页面中是否可行?

我的同事想开发一个包含搜索框的页面,当用户输入关键字并点击搜索时,它会传递给搜索引擎(例如google)并抓取结果。然后将结果插入数据库并在我的页面中显示结果。

【问题讨论】:

  • 这不是一件容易的事男人,去赏金......

标签: asp.net search search-engine web-crawler


【解决方案1】:

您可以使用谷歌搜索 API,但现在已弃用。 还有其他方法,但搜索引擎可以很容易地检测到非人类进行搜索。所以不建议这样做。

【讨论】:

  • 嗨,如果搜索引擎不是谷歌,只是一些 3rd 方搜索引擎...有什么办法可以抓取结果吗?谢谢