【问题标题】:Snowflake Data Unload to csv files雪花数据卸载到 csv 文件
【发布时间】:2020-04-21 19:41:31
【问题描述】:

在使用copy into命令从Snowflake中卸载数据时,如果我不使用任何压缩直接带csv文件,大约500mb数据,数据存储成本会增加吗?

【问题讨论】:

    标签: python snowflake-cloud-data-platform


    【解决方案1】:

    如果输出文件没有被压缩,它们可能会占用更多的空间,并且可能会增加成本。

    根据云提供商和地区的不同,Snowflake 存储成本可能会有所不同,但约为 40-50 美元/TB/月。因此,如果总大小约为 500 MB,这不会有很大的不同。

    雪花定价页面:https://www.snowflake.com/pricing/

    AWS S3 存储:https://aws.amazon.com/s3/pricing/

    天蓝色:https://azure.microsoft.com/en-us/pricing/details/storage/

    【讨论】:

    • 感谢您的回复!我正在使用 Snowflake 的内部 Stage 临时存储 csv 文件,一旦 ETL 加载完成,这些文件就会从 Stage 中删除。所以,只是想了解数据存储成本会有什么不同。
    • 我发现如果不解压缩文件可能会增加成本,最好的方法是测试。用一个文件子集测试一个月,看看它比上个月花费了多少。如果此金额对您的业务需求是合理的,请继续使用它。我通常建议对文件进行解压缩以节省一些存储费用,但这在您的用例中可能没有太大区别。此外,这里有一些关于如何计算的文档:docs.snowflake.net/manuals/user-guide/…
    猜你喜欢
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    • 2020-09-27
    • 2021-12-24
    • 2022-01-23
    • 1970-01-01
    • 2021-03-17
    相关资源
    最近更新 更多