具有不同区域中的存储桶的 AWS Athena 表失败

Question

我需要查询 Athena 运行区域以外的区域的数据。

试试这个：https://docs.aws.amazon.com/athena/latest/ug/json.html 按照文档，即使我也无法查询同一区域的存储桶。

假设我现在的S3和Athena都是us-east-1，那么

位置 's3://mybucket/data/' 。 （工作中）

LOCATION 's3://mybucket-us-east-1/data/'（不工作）

我需要从 eu-central-1 查询数据 LOCATION 's3://my-another-bucket-eu-central-1/data/'（不工作）

有什么帮助吗？

错误： 失败：执行错误，从 org.apache.hadoop.hive.ql.exec.DDLTask 返回代码 1。 com.amazon.ws.emr.hadoop.fs.shaded.com.amazonaws.services.s3.model.AmazonS3Exception：指定的存储桶不存在（服务：Amazon S3；状态代码：404；错误代码：NoSuchBucket；

Answer 1

我相信JSON SerDe Libraries 页面中的注释是针对亚马逊在s3://athena-examples-us-east-1 和其他区域的存储桶中的 Athena 示例数据：

注意

您可以在运行 Athena 的区域以外的区域查询数据。除标准 Athena 费用外，还适用 Amazon S3 的标准区域间数据传输费率。要减少数据传输费用，请将 s3://athena-examples-myregion/path/to/data/ 中的 myregion 替换为您运行 Athena 的区域标识符，例如 s3://athena-examples-us-east-1 /path/to/data/.

您应该通过名称引用您自己的存储桶，即使它们位于另一个区域，它们也应该可以工作。