urllib2

无效语法:facebook-sdk

我正在尝试在 python 中导入 facebook pkg 但它给了我以下错误 Traceback (most recent call last): File "C:\ProgramData\Anaconda3\lib\site-packages\IPython\core\interactiveshell.py", line 3326, in run_code exec(code_o... »

使用 GAE/Webapp2/Urllib2/Python 解决“必须启用 Cookie 才能使用 GitHub”

尽管浏览了 API 文档,但我找不到任何解释为什么 Github 需要启用 cookie 或如何去做。我可能错过了。 我想在带有 Urllib2 的 Python 中使用 GAE 上的原生 Webapp2 框架,并远离高级库,以便我可以从内到外学习这一点。 我的代码片段: # Get user name fields = { "user" : username, "acces... »

在解决所有重定向后但在使用 urllib2 下载页面之前如何拦截请求?

我正在抓取新闻文章并使用 urllib2。它会自动处理重定向,我可以使用 geturl() 从响应中获取解析的 url 但是如果解析的 url 在某个列表中,我想停止请求,以避免花费时间和带宽下载页面。 只要回答这些问题就足够了 urllib.opener.open() 是否会下载页面,或者当您调用response.read() 时是否会发生这种情况? 有没有一种方法可以询问urllib2... »

迭代一个python对象并过滤它

我从 Web 服务获得的 JSON 表示法: { "students": [ { "studentId": 127292, "studentName": "Mary" }, { "studentId": 15555, "studentName": "Joe" } ] } 我正在尝试迭代 JSO... »

urllib3 maxretryError

我刚开始使用 urllib3,我马上就遇到了问题。根据他们的手册,我从一个简单的例子开始: Python 2.7.1+ (r271:86832, Apr 11 2011, 18:13:53) [GCC 4.5.2] on linux2 Type "help", "copyright", "credits" or "license" for more information. >>&... »

Python 请求 api 未在表体内获取数据

我正在尝试废弃网页以从请求响应返回的文本数据中获取表格值。 </thead> <tbody class="stats"></tbody> <tbody class="annotation"></tbody> </table> </div> 实际上tbody 类中存在一些数据,但`我无法使用请求访问该... »

无法弄清楚如何在其他人的脚本中编辑 http 标头

所以,我在运行 a script 时不断收到“429 太多请求”。经过一番研究,我发现这是因为它正在获取的网站在发出多个请求时需要某种带有请求的 HTTP 标头。我以前没有在 python 中工作过,我不知道如何在这个脚本中将标头附加到 HTTP 请求?谢谢 好的。 StackExchange 要求我进行编辑以解释它与类似问题的不同之处。类似的question“如何在 HTTP 请求中发送带有 ... »

Gnip 问题 - 创建作业时 - urllib2.URLError

我正在尝试使用 Gnip Historical Powertrack API 创建一个作业。 我遇到了 urllib 的问题.. import urllib2 import base64 import json UN = '' # YOUR GNIP ACCOUNT EMAIL ID PWD = '' account = '' # YOUR GNIP ACCOUNT U... »

urllib.request.urlopen(URL) 在 python3 中不起作用

我正在尝试使用 urllib.request.urlopen 访问 JSON。当我在 python2 中使用 urllib2 时它工作正常,但不是 urllib.request.urlopen。 URL = 'https://api.exchangeratesapi.io/latest' f = urllib.request.urlopen(URL) Traceback (most rec... »

使用 urllib 发出 post 请求

我正在尝试向 API 提供者提出请求 curl "https://api.infermedica.com/dev/parse" \ -X "POST" \ -H "App_Id: 4c177c" -H "App_Key: 6852599182ba85d70066986ca2b3" \ -H "Content-Type: application/json" \ -d '{"text... »

如何强制 urllib2 超时?

我想在通过 urllib2 抓取数据时测试我的应用程序对超时的处理,并且我想有一些方法来强制请求超时。 找不到非常慢的互联网连接,我可以使用什么方法? 我似乎记得一个有趣的应用程序/套件来模拟这些事情。也许有人知道链接? ... »

urllib & cookielib - 下载图片

这是我目前得到的: import urllib, urllib2, cookielib jar = cookielib.CookieJar() opener = urllib2.build_opener(urllib2.HTTPCookieProcessor(jar)) login_data = urllib.urlencode({'User' : 'c1300', 'Pass' : '580... »

Python urllib2:从 url 接收 JSON 响应

我正在尝试使用 Python 获取 URL,响应为 JSON。但是,当我运行时 import urllib2 response = urllib2.urlopen('https://api.instagram.com/v1/tags/pizza/media/XXXXXX') html=response.read() print html html 是 str 类型,我期待的是 JSON。有什... »

无法使用 Python 请求获取整个页面

我正在尝试从网页获取较长的 JSON 响应(约 75 MB),但是我只能收到前 25 MB 左右。 我使用过urllib2 和python-requests,但都不起作用。我试过reading parts in separately 和streaming the data,但这也不起作用。 可以在此处找到数据示例: http://waterservices.usgs.gov/nwis/iv/... »