从 URL 后台上传到 AWS S3 [重复]

Question

我目前正在使用一项服务来录制用户之间的 WebRTC 视频。他们为我提供了访问这些录音的 URL。但是，我想将这些移动到 Amazon S3，因为存储成本要便宜得多。我不希望这些视频通过我的 Heroku 服务器，因为这会（我认为）占用太多内存，因为视频可能会变得非常大。

有没有办法从给定的 URL 直接推送到 S3 我在 S3 文档中找不到太多帮助。

我目前在 Heroku 上托管一个 Ruby on Rails 服务器。理想情况下，我希望这个过程发生在后台 Sidekiq 工作人员中。根本不涉及浏览器/客户端上传。

Answer 1

S3 只是一个存储。它没有任何计算能力。您可以在将执行此任务的 nano EC2 服务器上设置 cron-job 或任何 bash/python 脚本。此脚本将使用您的 URL 打开一个 URLConnection --> 打开一个流 --> 并开始写入 S3 存储桶。

几篇帮助文章：http://docs.aws.amazon.com/AmazonS3/latest/API/sigv4-post-example.html

https://leonid.shevtsov.me/post/demystifying-s3-browser-upload/