AWS S3 使用 TemporaryFile 下载和上传

Question

我需要下载 Amazon S3 存储桶的所有内容（包括版本）并上传到其他 Amazon S3 存储桶。不要叫我用aws，我就是不会用。

我为此使用了 tempfile.TemporaryFile，它显然有效，打印显示文件对象内部有正确的内容，但 上传 文件是空的（零字节）。

with tempfile.TemporaryFile() as data:
    sourceUser.download_fileobj('source-bucket',key,data)
    # next 2 lines was just to check the content of the file
    data.seek(0)
    print (data.read())
    destinationUser.upload_fileobj(data,'destination-bucket',key)

Answer 1

我也有同样的需求，如何将NamedTemporaryFile传递给上传s3

不确定如何将 NamedTemporaryFileName 传递给 output=f'{file_name}.gpg' 和 load_file 函数 --> filename=f_source.name

with tempFile.NamedTemporaryFile("wb") as f_source:
                s3_client.download_fileobj(s3_bucket, s3_key, f_source)
                logger.info(f'{s3_key} file downloaded successfully to local {f_source}')
                f_source.flush()
                file_name = self.s3_key.split('/')[-1]
                gpg = gnupg.GPG()
                key_data = open(key_path).read()
                import_result = gpg.import_keys(key_data)
                f_source.seek(0)
                with open(f_source.name, 'r+b') as f:
                    status = gpg.encrypt_file(
                        file=f,
                        recipients=[recipient],
                        output=f'{file_name}.gpg',
                    )

                    s3_hook.load_file(
                        filename=f_source.name,
                        key=s3_key,
                        bucket_name=s3_bucket,
                        replace=True
                    )