【发布时间】:2013-12-05 17:32:44
【问题描述】:
是否可以仅向机器人显示我的网页的 sitemap.xml ,如果有人想查看它并单击例如; http://www.mywebpage/sitemap.xml 收到一条不允许的警告消息,出于某种原因我应该这样做,有人知道吗
【问题讨论】:
是否可以仅向机器人显示我的网页的 sitemap.xml ,如果有人想查看它并单击例如; http://www.mywebpage/sitemap.xml 收到一条不允许的警告消息,出于某种原因我应该这样做,有人知道吗
【问题讨论】:
除了User-Agent 标头之外,机器人和人之间并没有真正的区别(只有在你幸运的情况下)。也就是说,返回 403 或基于代理的代理页面应该很简单。
您使用的是什么网络服务器?
【讨论】: