【发布时间】:2015-09-20 07:26:13
【问题描述】:
是否可以让 scrapy 将其内容中包含“rel="canonical"”的页面重定向到规范 url(如果页面本身不是规范的)?
【问题讨论】:
-
请您显示无法运行的特定代码。
-
我没有编码。如果可以的话,我不知道该怎么做。
-
但这里是这样。我认为你应该先用谷歌搜索你的问题,然后尝试你找到的解决方案。如果您遇到错误,那么您可以在这里提问。我以为你认识他们。
-
我问这个问题是因为,当我应该 GG 时,我没有找到解决方案。可能是,我在scrapy-users - Google Groups 上问这个问题
标签: python web-crawler scrapy