屏幕抓取 Facebook 中的好友列表，用于 Python

Question

我需要获取我朋友的 FB 朋友列表……实际上，是我所有朋友的列表。 FB API 不会让我获取不是我的任何人的朋友列表，但我可以在浏览器中手动获取这些列表。

我想获取这些列表。不知何故。它不必直接进入Python（我总是可以从朋友列表的html版本中获取数据）但我不知道如何自动化整个“去朋友，打开朋友列表，保存页面”的东西。我感觉我可以使用浏览器自动化，但是...好吧，我尝试使用 Selenium，但我无法破解它。

Answer 1

Mechanize 使得在复杂情况下自动化这些事情变得更加容易。不过，在这种情况下可能有点矫枉过正。使用BeautifulSoup 或lxml 来获取您的朋友列表并获取他们的ID，然后从那里生成他们朋友列表的URL，然后冲洗+重复，这将非常容易。