【问题标题】:How to structure a web scraper project?如何构建一个网络爬虫项目?
【发布时间】:2019-05-09 21:40:35
【问题描述】:

我有一个项目是使用 BeautifulSoup 从几个二手车网站收集帖子,然后将它们存储在数据库中。我的客户还要求在他熟悉或半熟悉的一些内容管理系统(如 wordpress)之上构建此功能。

使用 wordpress 可以做到这一点而不把它弄得一团糟吗?如果不是,您建议如何构建我的项目以及使用什么 cms?

【问题讨论】:

标签: python wordpress beautifulsoup architecture content-management-system


【解决方案1】:

Wordpress 似乎只支持 mySQLMariaDB,根据他们的网站:https://codex.wordpress.org/Using_Alternative_Databases。如果您想保持对 Wordpress 的支持,这些似乎是您唯一的数据库技术选项。

老实说,从那里开始,取决于您的 python 更容易访问的内容。

【讨论】:

    猜你喜欢
    • 1970-01-01
    • 2021-05-26
    • 2020-09-09
    • 2011-08-15
    • 2021-09-11
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    相关资源
    最近更新 更多