Guzzle 6 大文件上传/分块

Question

我了解到，如果 Guzzle 无法确定 Content-Length，它将发送 Transfer-Encoding: Chunked 标头，后端的 cURL 将处理分块。但我显然达到了 post_max_size 限制。 （“524288375 字节的 POST 内容长度超过了 8388608 字节的限制）当 POST 到工作的 uploadChunkerController 时。我知道上传处理程序（端点）适用于较小的文件。我觉得我的 Guzzle 选项配置有问题。我有将verify 设置为false，我需要在请求中发布api_key。

    $client = new Client();
    $fh     = fopen('../storage/random-500M.pdf', 'r');
    $url    = 'https://local:8443/app_dev.php/_uploader/bigupload/upload';

    $request = $client->request(
        'POST',
        $url,
        [
            'verify'    => false,
            'multipart' => [
                [
                    'name' => 'api_key',
                    'contents' => 'abc123'
                ],
                [
                    'name'     => 'file',
                    'contents' => $fh,
                    'filename' => 'bigupload.pdf'
                ]
            ]
        ]
    );

编辑 php.ini 设置不是一种选择，也不是解决方案。我发现了很多似乎适用于旧版本 Guzzle 的“解决方案”。我是不是想太多了？有没有更简单的解决方案？

Answer 1

在挖掘 Guzzle 和 cURL 源代码后，他们没有“自动”方式发送“块”。未设置标头，他们无法分割正在发送的文件。我使用 Guzzle 与原始 PHP cURL 调用提出了自己的解决方案。

/**
 * @Route("/chunks", name="chunks")
 */
public function sendFileAction()
{
    $jar       = new \GuzzleHttp\Cookie\SessionCookieJar('SESSION_STORAGE', true);
    $handler   = new CurlHandler();
    $stack     = HandlerStack::create($handler);
    $client    = new Client(['cookies'=>true, 'handler' => $stack]);
    $filename  = 'files/huge-1gig-file.jpg';
    $filesize  = filesize($filename);
    $fh        = fopen($filename, 'r');
    $chunkSize = 1024 * 2000;
    $boundary  = '----iCEBrkUploaderBoundary' . uniqid();
    $url       = 'https://localhost/app_dev.php/_uploader/bigupload/upload';

    rewind($fh); // probably not necessary
    while (! feof($fh)) {
        $pos   = ftell($fh);
        $chunk = fread($fh, $chunkSize);
        $calc  = $pos + strlen($chunk)-1;

        // Not sure if this is needed.
        //if (ftell($fh) > $chunkSize) {
        //    $pos++;
        //}

        $request = $client->request(
            'POST',
            $url,
            [
                'cookies' => $jar,
                'debug'   => false,
                'verify'  => false,
                'headers' => [
                    'Transfer-Encoding'   => 'chunked',
                    'Accept-Encoding'     => 'gzip, deflate, br',
                    'Accept'              => 'application/json, text/javascript, */*; q=0.01',
                    'Connection'          => 'keep-alive',
                    'Content-disposition' => 'attachment; filename="' . basename($filename) . '"',
                    'Content-length'      => $calc - $pos,
                    'Content-Range'       => 'bytes ' . $pos . '-' . $calc . '/' . $filesize
                ],
                'multipart' => [
                    [
                        'name'     => 'api_key,
                        'contents' => 'aaabbbcc-deff-ffed-dddd-1234567890123'
                    ],
                    [
                        'name'     => 'file',
                        'contents' => $chunk,
                        'filename' => basename($filename),
                        'headers' => [
                            'Content-Type' => 'multipart/form-data; boundary=' . $boundary
                        ]
                    ]
                ]
            ]
        );
    }

    return new Response('ok', 200);
}

我希望这对其他人有所帮助。欢迎评论/建议。

Answer 2

分块传输编码在这种情况下没有帮助。

它用于通过部分发送（和生成）内容来尽快提供内容。它与大小限制无关（就像在您的场景中一样）。

你唯一的办法就是增加服务器的限制。