Web浏览器的本地python代理

Question

大家好！使用 firefox 插件，我可以捕获标题。我想在 python 中执行此操作：我需要将浏览器代理设置更改为 localhost:8080 （或任何端口），然后浏览器发出的每个请求都应该通过实际运行在我的机器上的 python 脚本。该脚本应该能够捕获标题，捕获网页中的链接等。我知道 Web 应用程序扫描仪会这样做，但我怎么能在 python 中做到这一点。你能建议任何开始的地方，阅读吗？我只是想了解它并实施一个。

Answer 1

看看python-proxy。谷歌搜索"python proxy" 也会产生大量结果。

如果你想从头开始写一个也不是太难。您可以使用BaseHTTPServer 来监听新连接，通过SocketServer.ThreadingMixIn 使其成为多线程，然后实现do_GET 和do_CONNECT（可能还有do_POST 和do_HEAD）。在这些方法中，您需要从 self.path 中提取 URL，向该 URL 发送 HTTP 请求（最好使用 requests 包，它比 urllib 更舒服）并将响应发送回客户端。