如何阻止所有 Selenium 机器人？

Question

如何阻止所有 selenium 机器人？我想阻止所有 selenium 项目。

说明：

我有一个非常大的流媒体动漫等网站。每月至少有 3000 万点击访客和会员。

一些网站从我们的网站视频链接中抓取。与硒机器人一起使用

在我们进行检查和阻止之前，用户代理、速率限制、会话 id 检查许多机器人被阻止，但现在仍然有人抓取，更改代理 IP，会话 ID 再次发送抓取请求。所以他/她绕过了我们的速率限制等跟踪器。

如何阻止所有 selenium 机器人？我想阻止所有 selenium 项目。

Answer 1

您将无法完全阻止 Selenium 机器人，因为有特定措施可以绕过几乎所有机器人检测机制。举几个例子：

• navigator.webdriver flag can be modified to prevent Selenium detection。
• 谷歌浏览器的user-agentused by Selenium can be changed for each execution。
• google-chromeused by Selenium can be changed amid execution的用户代理。
• 使用rotating proxies to avoid detection。
• cloudflarecan also be bypassed 检测到机器人。
• Cloudflare 检测到google-chrome-headless can also be bypassed。
• Error 1015: You are being rate limited by Cloudflare can also be bypassed。

---

tl;博士

Can a website detect when you are using Selenium with chromedriver?