【发布时间】:2023-03-24 16:17:01
【问题描述】:
基本上,我想将配置单元表的架构导出到 csv 文件中。我可以创建一个数据框,然后显示其架构,但我想将其架构写入 csv 文件。看起来很简单,但它不会工作。
【问题讨论】:
-
你希望输出是什么样的?
-
您可以从
testing.columns获取列名,从testing.dtypes获取数据类型。完整架构可在testing.schema中找到。将它们转换为csv文件相当简单,但这取决于所需的输出。 -
你只需要通过 spark 吗?通过 shell 有更简单的方法。
标签: python sql csv pyspark export-to-csv