【问题标题】:robots.txt to remove searche engine resultsrobots.txt 删除搜索引擎结果
【发布时间】:2015-09-07 16:00:05
【问题描述】:

我听说您可以通过在网络指向的主文件夹中的 robots.txt 中添加一些内容来删除谷歌搜索和图像,我该怎么做以及内容消失需要多长时间?

【问题讨论】:

  • 你已经听说过,但是你太懒惰或无能谷歌搜索“robots.txt”?
  • 如果这篇文章冒犯了你,我很抱歉.. 但我无法直接看到结果,因为我知道爬行时间需要一些时间来更新,这就是为什么我想从有经验的人那里获得帮助,所以我不必等待 20 多个小时,看看是否有效果。你必须放松一下,伙计
  • 我不这么认为。我真的认为这是一个问题,与在 robots.txt 上编写文档并编写答案的人相比,两分钟的 google 将比 10 分钟的知识相同(或更少)的人解决得更好。
  • 好的,谢谢你的澄清,也许下次我会去征求你的意见。但是使用有辱人格的词语是不受欢迎的
  • 对不起,我不是故意贬低你;请将这句话理解为鼓励,鉴于您听说过 robots.txt,您应该应用您的知识并自己进行研究。

标签: web-crawler google-crawlers


【解决方案1】:
User-agent: *
Disallow: /

第一行告诉:将以下应用于所有机器人。 第二行告诉:不允许解析任何页面。

【讨论】:

  • 谢谢小伙伴,你知道它需要多长时间才能激活吗?它会删除旧结果吗?
猜你喜欢
  • 2011-08-26
  • 1970-01-01
  • 1970-01-01
  • 1970-01-01
  • 2014-01-29
  • 1970-01-01
  • 1970-01-01
  • 2012-04-10
  • 2012-10-25
相关资源
最近更新 更多