【问题标题】:How to move s3 objects from one bucket to another based on time of creation using AWS CLI?如何使用 AWS CLI 根据创建时间将 s3 对象从一个存储桶移动到另一个存储桶?
【发布时间】:2021-10-29 21:12:22
【问题描述】:

我有一个启用版本的存储桶“A”,其中包含许多对象。我需要将所有对象从存储桶“A”移动到另一个启用版本的存储桶“B”。条件是“我需要根据创建时间移动对象。应该先移动存储桶“A”中的旧对象”

如何使用 aws-cli 做到这一点?

【问题讨论】:

  • 你不能在一个命令中做到这一点。你需要为此编写一个脚本。

标签: amazon-web-services amazon-s3 aws-cli


【解决方案1】:

这是单个命令:

aws s3 ls s3://<from-bucket> --recursive | awk '{d=substr($0,1,10)}(d < "2019-10-25")' | cut -c 32- | awk '{print "--include "$0}' ORS=' ' | xargs aws s3 mv s3://<from-bucket> s3://<to-bucket> --recursive --exclude '*'
  1. 首先我们从源存储桶中读取所有文件,输出中的第一列将是最新的更改日期
  2. 然后使用awk 减去日期并与您自己指定的目标日期进行比较
  3. 使用cut 减去文件名
  4. 使用awkaws s3 mv 命令准备包含参数
  5. 使用xargs 将参数传递给aws s3 mv

【讨论】:

  • 感谢您的回复,这适用于 2 个不同帐户中的存储桶吗?假设启用版本的存储桶“A”在一个帐户中,启用版本的存储桶“B”在另一个帐户中。
猜你喜欢
  • 1970-01-01
  • 1970-01-01
  • 2020-05-29
  • 2020-09-15
  • 2021-01-17
  • 2021-04-13
  • 2018-05-08
  • 2017-07-21
  • 1970-01-01
相关资源
最近更新 更多