使用 Python 请求获取 HEAD 内容答案

【问题标题】：Getting HEAD content with Python Requests使用 Python 请求获取 HEAD 内容
【发布时间】：2012-03-22 05:37:18
【问题描述】：

我正在尝试解析使用 Python Requests 库完成的 HEAD 请求的结果，但似乎无法访问响应内容。

根据docs，我应该可以访问requests.Response.text中的内容。这在 GET 请求上对我来说很好，但在 HEAD 请求上返回 None。

GET 请求（有效）

import requests
response = requests.get(url)
content = response.text

内容 = <html>...</html>

HEAD 请求（无内容）

import requests
response = requests.head(url)
content = response.text

内容 = None

编辑

好的，我很快就意识到 HEAD 请求不应该返回仅内容标头的答案。但这是否意味着，要访问页面的<head> 标签中的内容，例如<link> 和<meta> 标签，必须获取整个文档？

【问题讨论】：

标签： python head http-request python-requests

【解决方案1】：

definition，对 HEAD 请求的响应不包含消息体。

如果你想发送一个 GET 请求，那么，得到一个响应体。发送 HEAD 请求 iff 你只对响应状态码和标头感兴趣。

HTTP 传输任意内容； HTTP 术语 header 与 HTML <head> 完全无关。但是，可以建议 HTTP 仅下载文档的一部分。如果您知道 HTML <head> 代码的长度（或其上限），则可以在请求中包含 HTTP Range 标头，以建议远程服务器仅返回一定数量的字节。如果远程服务器支持 HTTP 范围，那么它将提供简化的答案。

【讨论】：

好吧，我的错误——但是如何从 HEAD 请求中捕获 <link> 和 meta 标签之类的东西——或者这不可能？
嗯，<link> 和 <meta> 标签只存在于 HTML body 中。您可以访问的唯一标头是 HTTP 标头。 为什么你还是要发送 HEAD 而不是 GET？
phihag- ? <meta> 标签位于此页面上文档视图源的<head> 部分。我希望只获得<head> 以减少链接抓取时间。
您在不同协议的上下文中混淆了相似的术语。 HTTP 对 HTML 代码一无所知；它只是传输带有标题的任意内容（例如内容类型或其到期日期）。如果您知道 HTML <head> 的长度，则可以在请求中包含 Range 标头，但我怀疑这会加快处理速度，除非完整的 HTML 代码非常庞大。

【解决方案2】：

HEAD 没有任何内容！试试response.headers - 这可能就是行动所在。 HTTP HEAD 请求没有获得您从 GET 请求中获得的 HTML 响应的 <head> 元素。我认为那是你的错误。

【讨论】：

【解决方案3】：

HEAD 响应没有正文。它们只返回 HTTP 标头，与使用 GET 请求时获得的相同。

【讨论】：