上传文件时收听 aws s3 bucket

Question

我有一个问题，我需要知道是否有人知道如何解决它.. 我需要创建一些东西，当文件上传到那里时监听 s3 存储桶，并实际获取他们上传的文件并使用我已经拥有的各种流程在我的网站上对其进行操作

所以基本上，是否有类似这样的东西可以让我收听在 s3 中上传的内容，然后对其进行操作？

谢谢

Answer 1

有很多方法可以实现这一点。 首先启用将在s3 PutObject 上触发的S3 Notification，然后触发其中任何一个 -

• Lambda - 获取对象和进程（不适用于大文件，lambda 可以运行 15 分钟）
• 将新对象通知放入SQS queue。然后启动ec2 instances 来处理文件。你可以使用autoscaling和cloudwatch alarm。获得一些想法from here。 或者更多。

我的建议是——

s3 notification -> Trigger Lambda -> get object key and run ec2 instance -> ec2 does the hard work

没有什么想法是完美的，它在很大程度上取决于您的系统。寻找满足您需求的更好解决方案。

最好的祝愿。