如何使用 PHP 获取 GET 请求 URL [关闭]

Question

如您所知，您可以使用 Chrome 开发者工具或 Firebug 获取网站发出的所有请求。像这样：

我需要使用 PHP 获取这些信息，我应该使用什么方法？谢谢。

Answer 1

简答：

只有 PHP，你不能。 （嗯，你可以，但你必须编写“浏览器引擎”）。

长答案：

请求地址

使用 php，您可以向地址发出请求并使用cURL 甚至file_get_contents 下载响应（前提是您的 php.ini 中允许这样做）。例如：

$body = file_get_contents('http://www.google.com');
var_dump($body);

$body 包含“http://www.google.com”的响应正文，在本例中，它是一个 HTML 文件。

但是，URL 有时会以不同于 HTML 文件的方式回答（可以是 XML、json、纯文本等）

cURL 允许您获取和检查响应标头，您可以使用它来发现响应的内容类型。 Check this SO post for further details.

某些标头也可能“指向”其他资源，这意味着您也需要正确解析标头。

解析响应正文

现在您需要根据响应内容类型标头解析响应。如果它是 json 或纯文本，那么你很高兴，因为据我所知，这些类型的文件无法发出进一步的请求。

但是让我们假设它是普通的、常规的、纯 HTML。您可以使用 DOMDocument 来解析 HTML。

$doc = new DOMDocument();
$doc->loadHTML($body);

但是，您可能需要先抑制错误或验证并修复 html 源代码，因为 DOMDocument 很容易被格式错误的 HTML 文档阻塞。

遍历响应体

您将需要遍历 HTML 文档并查找请求资源的 HTML“标签”。比如图片标签、脚本标签、对象标签等等……

这可能涉及大量编码。

AJAX，陷阱

但是，即使完成了所有这些工作，仍然存在问题。现代页面广泛使用异步请求（例如，基于角度的页面）。

为了获取这些异步请求，您需要在 PHP 中创建一个 javascript 解析器和解释器（这太疯狂了）或依赖第三方工具（例如，您可以通过数据 nodejs 来运行你的 javascript）。