禁止搜索引擎爬虫，但允许谷歌分析

【问题标题】：Disallow search engine crawlers but allow google analitics禁止搜索引擎爬虫，但允许谷歌分析
【发布时间】：2023-03-09 01:07:01
【问题描述】：

我的 Google Analytics（分析）似乎无法正常工作，因为我已阻止所有用户代理。我的网站仍处于测试版，因此我不想被搜索引擎看到，但我仍然想查看我的网站分析数据。

我怎样才能在我的 robots.txt 中只允许 Google Analytics？

【问题讨论】：

【解决方案1】：

您无需在 robots.txt 中指定 Google Analytics。

由于通过 javascript（您复制/粘贴的代码）将 Google Analytics 调用到您的文件中，因此每当有人访问您的页面时，它都会连接到 Google Analytics 并记录访问。

Robots.txt 仅在您想阻止 Google bot 为您的网站编制索引（抓取并将其发布到 google）时提供。

【讨论】：