我在哪里可以找到关于 Web Spiders 和 AI 的论文？答案

【问题标题】：where can i find papers on Web Spiders and AI?我在哪里可以找到关于 Web Spiders 和 AI 的论文？
【发布时间】：2010-12-11 02:29:29
【问题描述】：

我有兴趣找到算法或方法来开发遵循计算机科学论文中强调的某些 AI 或爬行模型的蜘蛛。..

我在哪里可以找到这样的论文？

【问题讨论】：

您希望通过人工智能增强爬取过程的哪一部分？如果有的话，你想到了哪个 AI“模型”？这个问题既含糊又有点奇怪，参见缺乏回应但 steven 的“未回答”。
似乎我的问题已被编辑。但无论如何，我想找到一些独特的算法来提高爬取速度和资源的有效利用。我对人工智能一无所知。

标签： computer-science artificial-intelligence web-crawler

【解决方案1】：

Google Scholar

【讨论】：

【解决方案2】：

您可以尝试网络搜索的信息检索和文本挖掘算法。大多数现实世界的数据采集技术都是基于这些学科的非常普遍的想法。一本关于数据挖掘的好书也会有所帮助（例如 Data Mining: Practical Machine Learning Tools and Techniques by Witten & Frank）。

【讨论】：

【解决方案3】：

如果您有一些关键字（如“Web Spiders”和“AI”），您可以使用它们在某些学术数据库上执行论文搜索：

ACM：https://www.acm.org/
arXiv：https://arxiv.org/
谷歌学术：https://scholar.google.com/
IEEEXplorer：https://ieeexplore.ieee.org/
ScienceDirect：https://www.sciencedirect.com/
研究门：https://www.researchgate.net/

但并非所有从这些服务中检索到的论文都是免费提供的。如果您可以访问某些大学网络，可能大部分付费论文都会为您解锁。世界各地的大多数大学都与主要出版商签订了协议。

如果你有兴趣，我已经制作了一个工具来帮助我找到我的研究论文https://github.com/jonatasgrosman/findpapers。您只需要编写一个查询，该工具会自动为您在许多数据库中搜索匹配项:)

【讨论】：