【发布时间】:2015-03-23 15:18:08
【问题描述】:
我想通过python获取Vine上不同品牌(公众号)的帖子数据(如标题、点赞、分享、内容)。 现在我有一些想法:
github有一个叫做Vinepy的Vine api(https://github.com/davoclavo/vinepy),但是它需要你创建帐户并使用你自己的登录信息,而且你似乎只能从你自己的帐户中抓取数据,所以可以我也使用 Vinepy 从其他帐户抓取数据?因为关于 Vinepy 的例子很少,我不知道该怎么做。
我想出的另一种选择是使用 beautifulsoup + selenium 来执行此操作。因为 vine 页面中有“加载更多”按钮,您需要使用 selenium 与之交互。但我的问题是beautifulsoup + selenium 可以处理Javascript吗?因为所有帖子都是由名为 ember.js 的 javascript 框架编写的
或者有人对如何做有更好的想法?
非常感谢!
【问题讨论】:
标签: javascript python selenium web-scraping vine