在 Heroku Worker Dyno 上处理上传的文件

Question

在我正在构建的 RoR 应用程序中，管理员可能会上传一个（相对较小的）文件，然后需要对其进行处理（这需要相对较长的时间）。由于此应用程序在 Heroku 上运行，我想在工作人员测功机上进行处理，以免占用网络测功机。我们正在使用delayed_job gem 进行排队。

想知道最好的方法是什么 - 我考虑过的几个通用解决方案：

• 将文件上传到 S3 并让工作人员从 S3 中获取它。缺点：出于各种原因，我宁愿不添加 S3 依赖项，而且我们不会在处理后保留文件。

• 将文件读取为字符串，然后当作为参数传递给延迟方法时，delayed_job 将其放入数据库中。然后，处理作业可以将其转换回所需的格式。

第二种解决方案有什么缺点吗？它似乎可以工作，但不确定它是否理想。还有其他推荐的做事方式吗？

Answer 1

您有两个选择：像 S3 这样的文件存储或数据库。

在 S3 上存储文件既便宜又可靠。有一个内置协议用于在前端 Web 进程和后端工作人员之间将 URL 传递给文件。我强烈推荐这个。

您还可以将文件内容存储在 Postgres 或 Redis 等数据库中，您的前端 Web 进程和后端 dyno 都可以访问这些数据库。数据库是通用引擎，通常是更昂贵的存储文件的地方。这也可以，但我不建议这样做。