访问 URL 的自动化脚本 [关闭]

Question

我正在使用 PHP、Codeigniter 和 Google Books（在 WIndows 7 XAMPP localhost 环境中）创建一个简单的 Web 应用程序。

我有一个 MySQL 书籍列表（几百本）和相应的 ISBN 编号。当用户第一次查看一本书/访问一个 URL 时，对 Google 图书进行 API 调用，并将图书的标题、作者和描述保存到我的数据库中。

理想情况下，我想自己填充数据库，而不是依赖用户。所以，我正在考虑手动访问每个 URL。但是有很多项目！

有没有可以用于此类任务的脚本？我希望在 24 小时内每 5 分钟运行一次脚本。

我的网址格式如下：

/items/itemView/1 // <-- book 1
/items/itemView/2 // <-- book 2
/items/itemView/3 // <-- book 3
// etc
// etc

谢谢

Answer 1

简答：

存在存储 API，因此您不必对所有内容进行编目。

长答案：

听起来您正在尝试使用 API 并搜索每一个条目并为您自己的目的记录它们。

虽然这通常可以相当简单地完成，但我不会告诉你如何做，而是告诉你为什么你不应该。

存在一个用于大型数据库的 API，因此您不必存储所有数据，因为所需的资源绝对是巨大的，通常比大多数爱好者甚至拥有的还要多。

最好像现在一样拥有它，缓存访问过的内容以防再次访问，并定期确保你保留的任何记录，与它的来源进行比较，这样你就没有-过时记录（本地缓存的另一个缺陷）。

我希望这至少可以帮助您了解为什么人们倾向于不复制大型数据源。