PHP：请求 50MB-100MB json - 浏览器崩溃/不显示任何结果

Question

巨大的 json 服务器请求：例如大约 50MB - 100MB。

据我所知，在将大量数据请求加载到表（我通常使用数据表）时可能会崩溃，结果：内存达到近 8G，浏览器崩溃。 Chrome 可能不会返回结果，Firefox 通常会询问我是要等待还是终止该进程。

我将开始开发一个项目，该项目将发送对大量 json 的请求，全部压缩（由服务器端 PHP 完成）。我的报告的目的是获取数据，并在表格中显示所有内容 - 易于过滤和排序。因此，对于这种特定情况，我找不到“延迟加载”的用法。

这次我可能会使用 vue-js 数据表库（不确定具体是哪个）。

• 到底是什么占用了我这么多内存？我确定收到了 json 结果。将 json 渲染/解析到 DOM 吗？ （我现在指的是数据表示例：https://datatables.net/examples/data_sources/ajax）

• 在这种情况下，最佳做法是什么？ 我开始研究这个问题，并注意到 2010 年的一些帖子似乎根本不相关。

Answer 1

HTTP 响应的大小没有限制。其他方面有限制，比如：

• 本地存储
• 会话存储
• 缓存
• cookies
• 查询字符串长度
• 内存（根据您的 CPU 限制或浏览器分配）

相反，问题很可能出在您的数据表实现上。您不能只在 DOM 中插入 100,000 个节点而不期望某种类型的性能影响。此外，如果数据表在这些数据进入时对每个数据执行逻辑并在插入节点之前对其进行处理，那么这也将是一个很大的问题。

您在这里所做的基本上是将执行分页的工作从服务器传递到客户端，并产生了可怕的影响。

如果您必须返回这么大的响应，请考虑使用浏览器提供的存储选项之一（上面提到了一些）。然后从存储的 JSON 响应中分页。