【发布时间】:2020-09-11 04:59:40
【问题描述】:
我创建了一个 pandas 数据框。这打印得很好,但是我需要在 SQL 中进行操作。
我已经运行了以下内容:
spark_df = spark.createDataFrame(df)
spark_df.write.mode("overwrite").saveAsTable("temp.testa")
pd_df = spark.sql('select * from temp.testa').toPandas()
但是得到一个错误:
AnalysisException: Database 'temp' not found;
显然我还没有创建数据库,但不知道该怎么做。
任何人都可以建议我如何实现我所需要的吗?
【问题讨论】:
标签: pandas pyspark databricks azure-databricks