【发布时间】：2011-06-18 11:34:54
【问题描述】：
在做网站的第一天，我在一些链接的生成中犯了错误；跟随它们会输出一个数据库错误。
Google 漫游器已尝试跟踪这些链接，现在它们在网站管理员工具中显示为抓取错误。 虽然我已经更正了错误，但谷歌仍然尝试抓取它们。
如何告诉 Google 此类链接已不存在且无法通向何处？我不能做一个 301 重定向，因为它会说链接是有效的并且可以索引它们。
【问题讨论】：
标签： seo googlebot web-crawler
【发布时间】：2011-06-18 11:34:54
【问题描述】：
如果页面在没有逻辑替换的情况下消失，那么您通常应该返回 404 错误，但在这种情况下，我会考虑返回 410 Gone - 这表明该页面已被永久删除，永远不会返回，应该从谷歌索引中清除。
可能值得为有问题的 url 查找现有代码库，以确保没有指向它们的链接。
至于301的301不代表链接有效，301是永久移动的。这告诉谷歌它曾经在这里寻找的页面现在生活在其他地方，并将谷歌引导到新位置。从事物的声音来看不适用于您的情况，但与您描述的方式略有不同。
欲了解更多信息，请参阅http://en.wikipedia.org/wiki/List_of_HTTP_status_codes
【讨论】：
我会在你的 robots.txt 中标记它们
【讨论】：