【问题标题】:Is there a way to have a fast upload to an S3 AWS bucket from a web form?有没有办法从 Web 表单快速上传到 S3 AWS 存储桶?
【发布时间】:2022-01-22 18:34:57
【问题描述】:

我目前正在努力寻找一种解决方案,让人们以相对较高的速度从网络表单上传到 s3 存储桶。 我已经尝试过几个 nodejs 库(evaporatejsresumablejs),但上传速度有点低(~3.5 MB/s)和signedUrl PUT request solution,也很慢(~2 MB/s )。 关键是,人们应该能够从世界各地上传到这个存储桶,我们谈论的文件范围从 ~50MB 到几 GB,所以速度必须相当高,因为我不想要 30分钟上传。

我想知道是否有人知道实现目标的更好方法,因为我环顾了一个星期,发现只有这些,但还不够。

所有答案将不胜感激,在此先感谢您。

【问题讨论】:

  • 您查看过 AWS S3 分段上传吗?分段上传非常快。
  • 好吧,我使用了多部分 POST 请求。刚刚在谷歌上搜索了你的答案,发现这是 2 种不同类型的上传。谢谢@Anss,我会尽快尝试的。

标签: node.js amazon-web-services amazon-s3 post


【解决方案1】:

在分段上传的同时,尝试 s3 传输加速。通过传输加速,客户端数据将加载到最近的边缘位置,然后从那里进入您的 S3 存储桶。它可以将您的表现提高 10% 到 50%。

S3 传输加速 - https://docs.aws.amazon.com/AmazonS3/latest/userguide/transfer-acceleration.html

这种方法有一个缺点。对于靠近 S3 存储桶位置的客户端,它会增加额外的跃点以将数据从客户端移动到 S3。但与使用 S3 传输加速的整体优势相比,这是一个很小的损失。

S3传输加速速度对比-http://s3-accelerate-speedtest.s3-accelerate.amazonaws.com/en/accelerate-speed-comparsion.html

【讨论】:

  • 非常感谢您的回答。我已经尝试过了,但不幸的是输出仍然相同,上传速度很慢。
猜你喜欢
  • 1970-01-01
  • 2017-03-13
  • 2021-04-11
  • 2019-07-20
  • 2022-01-24
  • 1970-01-01
  • 2019-09-28
  • 1970-01-01
  • 2021-07-20
相关资源
最近更新 更多