在没有 python 脚本的情况下，以镶木地板格式将表从 redshift 卸载到 S3

Question

我发现我们可以使用 spectrify python 模块来转换 parquet 格式，但我想知道哪个命令将以 parquet 格式将表卸载到 S3 位置。

我发现我们可以使用复制命令将 parquet 格式的数据从 s3 加载到 redshift，https://docs.aws.amazon.com/redshift/latest/dg/r_COPY_command_examples.html#r_COPY_command_examples-load-listing-from-parquet

我们可以对从 redshift 卸载到 s3 做同样的事情吗？

Answer 1

无需使用 AWS Glue 或第三方 Python 将 Redshift 数据以 Parquet 格式卸载到 S3。现在支持新功能：

UNLOAD ('select-statement')
TO 's3://object-path/name-prefix'
FORMAT PARQUET

文档可以在UNLOAD - Amazon Redshift找到

Answer 2

您是否考虑过 AWS Glue？您可以根据您的 Redshift 源创建 Glue 目录，然后转换为 Parquet。 AWS 博客供您参考，虽然它谈到将 CSV 转换为 Parquet，但您明白了。