【发布时间】:2016-07-27 09:07:34
【问题描述】:
我正在尝试将已上传到 S3 的 JSON 文件导入 DynamoDB
我按照亚马逊给出的教程进行操作
http://docs.aws.amazon.com/datapipeline/latest/DeveloperGuide/dp-importexport-ddb-console-start.html
但是当我尝试激活管道时,组件 TableLoadActivity 失败并且 DBDDestinationTable 显示 CASCADE_FAILED
两者都报错
在 org.apache.hadoop.mapreduce.JobSubmitter.writeSplits(JobSubmitter.java:512) 在 org.apache.hadoop.mapreduce 的 org.apache.hadoop.mapreduce.JobSubmitter.writeOldSplits(JobSubmitter.java:520)。 JobSubmitter.submitJobInternal(JobSubmitter.java:394) at org.apache.hadoop.mapreduce.Job$10.run(Job.java:1285) at org.apache.hadoop.mapreduce.Job$10.run(Job.java:1282)在 java.security.AccessController.doPrivileged(Native Method) 在 javax.security.auth.Subject.doAs(Subject.java:415) 在 org.apache.hadoop.security.UserGroupInformation.doAs(UserGroupInformation.java:1548) 在 org .apache.hadoop.mapreduce.Job.submit(Job.java:1282) at org.apache.hadoop.mapred.JobClient$1.run(JobClient.java:562) at org.apache.hadoop.mapred.JobClient$1.run (JobClient.java:557) 在 java.security.AccessController.doPrivileged(Native Method) 在 javax.security.auth.Subject.doAs(Subject.java:415) 在 org.apache.hadoop.security.UserGroupInformation.doAs(UserGroupInformation .java:1548) 在 org.apache.hadoop.mapred.JobClient.submit工作内部(
任何帮助将不胜感激
【问题讨论】:
-
我遇到了类似的错误,因为我选择了准确的 json 文件。所以解决办法是选择json和manifest文件所在的文件夹
标签: amazon-s3 amazon-dynamodb amazon-data-pipeline