如何检测 Amazon S3 中的变化？ [复制]

Question

可能重复：
Notification of new S3 objects
Get notified when user uploads to an S3 bucket?

检测 Amazon S3 更改的最有效方法是什么？许多分布式盒子需要与 S3 同步本地文件。每个盒子都需要与 S3 存储桶的一部分同步。有时文件会从外部来源放入存储桶中，因此盒子不会知道它。

我可以编写一个脚本，不断爬取 S3 上的所有文件，并在发生更改时通知相应的框，但这会很慢而且成本很高。 （将有数百万个文件）。我曾考虑在存储桶上启用日志记录，但写入日志需要很长时间，我希望能很快收到更改通知。

还有其他想法吗？

Answer 1

Amazon 提供了一种通知存储桶事件的方法（如 here 所示），但目前唯一支持的事件是 s3:ReducedRedundancyLostObject。

恐怕你今天可以做你想做的唯一方法是通过轮询（或爬行，就像你说的那样）或修改将文件上传到你的存储桶的客户端（如果你控制他们的代码）以便在上传/更改内容时通知您的盒子。