【发布时间】:2017-05-26 12:00:12
【问题描述】:
我有子域“客户”用于为我们的客户测试网站,我不希望它被编入索引。我在 robots.txt(在我们网站的根目录)中设置了这个:
User-agent: *
disallow: /subdom/klient/*
但我不确定它是否真的有效,因为我现在在谷歌搜索结果中找到了测试站点......
哪里可能有问题,或者我们如何阻止谷歌和其他机器人索引这个文件夹...?
谢谢
【问题讨论】:
-
是子域还是子目录?
-
它是子目录,基于 ./subdom/klient/ 和 .htaccess,它可以像子域 (klient.url.com) 一样访问
-
从 Google 的角度来看,它是一个子域,而不是子目录。
-
@JohnKugelman 是的,你是对的......那么正确的解决方案是什么?