谷歌云存储 - 上传大文件 (4GB)

Question

我有以下脚本可以处理小文件，但是当我尝试大文件 (4GB) 时失败：

<?php

  require 'vendor/autoload.php';

  use Google\Cloud\Storage\StorageClient;

  $storage = new StorageClient([
      'keyFilePath' => 'keyfile.json',
      'projectId' => 'storage-123456'
  ]);

  $bucket = $storage->bucket('my-bucket');

  $options = [
      'resumable' => true,
        'chunkSize' => 200000,
        'predefinedAcl' => 'publicRead'
  ];

  // Upload a file to the bucket.
  $bucket->upload(
      fopen('data/file.imgc', 'r'),
      $options
  );

?>

我收到的错误是：

Fatal error: Uncaught exception 'Google\Cloud\Core\Exception\GoogleException' with message 'Upload failed. Please use this URI to resume your upload:

知道如何上传大文件吗？

http://googlecloudplatform.github.io/google-cloud-php/#/docs/google-cloud/v0.61.0/storage/bucket?method=upload

我也试过 getResumableUploader():

$uploader = $bucket->getResumableUploader(fopen('data/file.imgc', 'r'), [
  'name' => 'file.imgc'
]);

try {
  $object = $uploader->upload();
} catch (GoogleException $ex) {
  $resumeUri = $uploader->getResumeUri();
  $object = $uploader->resume($resumeUri);
}

当导航到恢复 URI 时，它会返回“不允许的方法”

Answer 1

我没有使用过这个 API，但我认为你不应该只是将一个大文件打开到内存中，然后将它塞进这个单一的请求中。你正在请求一个可恢复的操作，所以读取文件的一小部分，比如一次几 MB，然后循环遍历它，直到你上传了它的所有部分。

Answer 2

一个突出的问题可能是选择的 chunkSize 为 200000。根据文档，chunkSize 必须提供为 262144 的倍数。

另外，在处理大文件时，我强烈建议使用Bucket::getResumableUploader()。它将帮助您更好地控制上传过程，您应该会发现它会更可靠:)。我分享的链接中有一个代码 sn-p 应该可以帮助您入门。