boto3 下载文件路径

Question

似乎无法弄清楚如何将我可以使用 cli 执行的操作转换为 boto3 python。

我可以正常运行：

aws s3 ls s3://bucket-name-format/folder1/folder2/
aws s3 cp s3://bucket-name-format/folder1/folder2/myfile.csv.gz

尝试使用 boto3：

import boto3
s3  = boto3.client('s3', region_name='us-east-1', aws_access_key_id=KEY_ID, aws_secret_access_key=ACCESS_KEY)


bucket_name = "bucket-name-format"
bucket_dir = "/folder1/folder2/"
bucket = '{0}{1}'.format(bucket_name,bucket_dir)
filename = 'myfile.csv.gz'
s3.download_file(Filename=final_name,Bucket=bucket,Key=filename)

我收到此错误：

存储桶名称“bucket-name-format/folder1/folder2/”无效：存储桶名称必须与正则表达式“^[a-zA-Z0-9.-_]{1,255}$”匹配或为ARN 匹配正则表达式 "^arn:(aws).:(s3|s3-object-lambda):[az-0-9]:[0-9]{12}:accesspoint[/ :][a-zA-Z0-9-.]{1,63}$|^arn:(aws).:s3-outposts:[az-0-9]+:[0-9] {12}:outpost[/:][a-zA-Z0-9-]{1,63}[/:]接入点[/:][a-zA-Z0-9-]{1,63}$" *

我知道错误是因为存储桶名称 "bucket-name-format/folder1/folder2/" 确实无效。

问题：如何添加路径？我见过的所有示例都只是列出了基本存储桶名称

Answer 1

执行以下命令：

aws s3 cp s3://bucket-name-format/folder1/folder2/myfile.csv.gz

S3 URI 可以分解成

• 存储桶名称：bucket-name-format
• 对象前缀：folder1/folder2/
• 对象后缀：myfile.csv.gz

真的前缀和后缀有点做作，对象名真的是folder1/folder2/myfile.csv.gz

这意味着使用 boto3 API 下载相同的对象，你想用类似的方式调用它：

bucket_name = "bucket-name-format"
bucket_dir = "folder1/folder2/"
filename = 'myfile.csv.gz'
s3.download_file(Filename=final_name,Bucket=bucket_name,Key=bucket_dir + filename)

请注意，Bucket 的 download_file 参数只是存储桶名称，而 Key 不以正斜杠开头。