网站管理员抓取旧网址 [关闭]

Question

我们已于去年 2012 年 12 月更新了网站。之后，我们对需要的页面进行了 301 重定向，我们避免了旧站点中的一些页面到新站点。

例如：在旧网站中我们有http://www.mydomain.com/article/，而在新网站中我们删除了它。

页面在新站点中不存在/已删除，我们将其重定向到 404 页面。由于一段时间以来Webmaster -> Crawler Errors -> Not Found 类别报告显示旧 URL 已被编入索引，并且它的 响应代码 是 404。此外，在 Linked from 部分显示指向此的内部站点链接页面，当我检查该链接的页面时，它没有找到。

我通过阅读此 google 链接 http://support.google.com/webmasters/bin/answer.py?hl=en&answer=2409439 了解这些错误不会损害我们的 SEO，但是，我想知道这些错误发生的确切原因？

Answer 1

您应该创建一个 XML 站点地图并将其呈现给 Google，以便它知道期望和查找哪些页面。您可以使用网络或其他工具生成这样的站点地图，并且可以通过网站管理员页面将其添加到 Google。