【问题标题】:How to schedule an Elastic MapReduce Job Flow如何安排 Elastic MapReduce 作业流
【发布时间】:2013-08-24 01:50:56
【问题描述】:

我想每小时将我所有的 dynamodb 表数据转储到 s3 文件中。安排弹性 mapreduce 作业流程的最佳方法是什么? 我可以使用 Amazon Simple 工作流服务吗?

【问题讨论】:

  • 您是否尝试过设置 cron 作业?
  • 我曾想过使用 cron 作业,但这意味着我需要另一个实例。

标签: amazon-web-services amazon-dynamodb elastic-map-reduce


【解决方案1】:

查看亚马逊的新数据管道服务。我成功地用它来做一些非常相似的事情。

http://aws.amazon.com/datapipeline/

【讨论】:

    【解决方案2】:

    Elastic MapReduce 有一个命令行 (Ruby) 客户端,您可以在任何机器上的 cron 作业中编写脚本,available from AWS

    【讨论】:

      猜你喜欢
      • 2012-12-10
      • 2012-05-09
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      • 2012-10-17
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      相关资源
      最近更新 更多