使用 HTTPS url 索引和抓取数据

Question

我的网站是公开的（用户无需登录即可查看）+私有（用户必须登录才能使用）。

所以我的问题是，Google 抓取工具应该如何知道我的网站是私有的（带有 https 的 URL）。而且我还想抓取该内容并使用 HTTPS 为我的所有 ULR 编制索引。

是否有任何选项可用于通过 Google 网站管理员工具 支持 HTTPS 网址。如果有支持这些 URL 的选项，那么我想知道 Google 爬虫如何在不登录的情况下访问我的网络内容。所以大家分享你的想法，并提前感谢。

Answer 1

Google 能够抓取和理解 HTTPS 网址，就像它能够抓取和理解 HTTP 网址一样。话虽如此，Google 无法登录您的网站，因此 Google 将看不到登录后的任何内容。