AWS boto3 - 调用 GetObject 操作时出现 InvalidToken 错误

Question

我目前正尝试通过 sam local invoke 命令在本地调用 lambda 函数，但我在 GetObject 操作中不断收到 InvalidToken 错误。

我的尝试：

• 由于我在ap-northeast-2 区域上运行所有内容，因此我仔细检查了 我的配置文件.aws 文件夹设置为同一区域。
• 我已尝试通过 boto3 会话打印（虽然不推荐）凭据，并确认使用的凭据与凭据文件夹中的凭据相同（那里唯一的凭据）
• 我尝试在我的调用命令中添加 --region ap-northeast-2 标志，但它给出了同样的错误。
• 我检查了当前用户对 S3 资源具有完全访问权限（它具有管理员角色）。我也尝试过分离和重新附加角色（删除配置和凭据文件并使用另一个管理员角色再次运行 aws configure）但没有运气。

还有什么我可能忘记的吗？ 下面是代码和日志输出。在此先感谢:)

# imports omitted
logger.info('Starting...')
s3 =  boto3.client('s3')
logger = logging.getLogger()
logger.setLevel(logging.INFO)

session = boto3.Session()
credentials = session.get_frozen_credentials()
print(credentials.access_key, credentials.secret_key, credentials.token)

def load_model(): # handler function 
    logger.info('Loading model from S3')
    obj = s3.get_object(Bucket=MODEL_BUCKET, Key=MODEL_KEY )
    # obj = s3.Object(bucket_name='ml-project-paul-kang', key='fastai-models/lesson1/model.tar.gz')
    logger.info('Model loading complete')
    bytestream = io.BytesIO(obj['Body'].read()) # further code omitted

这是我运行sam local invoke PyTorchFunction -n env.json -e event.json后得到的：

Invoking app.lambda_handler (python3.6)
arn:aws:lambda:ap-northeast-2:<ID>:layer:pytorch-p36:1 is already cached. Skipping download
Requested to skip pulling images ...

[INFO]  2020-08-22T08:18:22.685Z                Starting...
<CURRENT_USER_ACCESS_KEY> <CURRENT_USER_SECRET_KEY> (null)
[INFO]  2020-08-22T08:18:22.685Z                Model Bucket is ml-project
[INFO]  2020-08-22T08:18:22.685Z                Model Prefix is fastai-models/lesson1/model.tar.gz
[INFO]  2020-08-22T08:18:22.686Z                Loading model from S3
module initialization error: An error occurred (InvalidToken) when calling the GetObject operation: The provided token is malformed or otherwise invalid.

Answer 1

我认为您的 s3 存储桶不在ap-northeast-2 区域。您可以在 s3 控制台上进行检查。如果不是，则需要在代码中传递区域，如下所示。

s3 =  boto3.client('s3', region_name='ap-northeast-2')