【发布时间】:2018-01-30 10:21:43
【问题描述】:
我试图了解 createOrReplaceGlobalTempView 和 createOrReplaceTempView 之间的区别。
createOrReplaceTempView 是在 2.0 版本中引入的,createOrReplaceGlobalTempView 是在 2.2 版本中引入的。
根据文档,
for createOrReplaceGlobalTempView :此临时视图的生命周期与此 Spark 应用程序相关联。
对于 createOrReplaceGlobalTempView :此临时表的生命周期与用于创建此 DataFrame 的 SparkSession 相关联。
能否详细说明 Spark Application 和 SparkSession 的区别。
问候,
尼拉杰
【问题讨论】:
标签: apache-spark pyspark