Python 从安全网站获取数据

Question

我想知道是否有办法使用 Python 从我的银行网站获取信息，我想检索我的银行卡历史记录并显示它，并可能每月将其保存到文本文档中。

我找到了用于登录并从网站获取信息的 url 分机，该网站可通过浏览器运行，但我一直在使用 liburl2 从 Python “打开”网页，但我感觉它无法正常工作，因为某些原因cookie 或会话的东西。

我可以从不需要使用 urllib2 登录的网站获取我想要的任何信息，然后保存实际的 HTML 并稍后浏览，但我无法在我的银行网站上，

任何帮助将不胜感激

Answer 1

这是 Web-Scraping 的一部分：

• 网页抓取是一项可以满足各种需求的标准任务。
• 从安全网站中抓取数据意味着https
• 处理https 不是mechanize 和BeautifulSoup 的问题
• 虽然urllib2 和HTTPCookieJar 也可以正常工作
• 如果管理 cookie 是问题，那么我会推荐mechanize

考虑到您的银行网站：

1. 我建议不要使用您的帐户玩游戏。
2. 如果您必须这样做，它并不像任何普通的安全/非安全站点那样简单。
3. 这些网站旨在承受此类脚本。

您将面临的问题：

1. 银行网站肯定会有验证码，除非您付出大量的火箭科学和努力，否则几乎不可能通过脚本绕过该验证码。
2. 您肯定会遇到的其他问题是 javascript，标准脚本解决方案专注于管理 cookie、HTML 解析等。要处理链接上的 javascript，您必须在 python 脚本中处理 js。这又需要付出很多努力。
3. 然后，再次来自 javascript 的 AJAX 在页面加载后从服务器获取数据。

因此，完成这项任务需要您付出很多努力。

此外，如果您尝试这样做，您可能会阻止访问您的帐户，因为银行网站会在 3-4 次尝试登录或验证码等失败时迅速阻止帐户访问。

所以，请三思而后行。