Databrick SCALA：函数内部的火花数据框

【问题标题】：Databrick SCALA: spark dataframe inside functionDatabrick SCALA：函数内部的火花数据框
【发布时间】：2020-06-03 03:41:17
【问题描述】：

我有一个 databricks scala 笔记本。我正在写以下内容

var df=(some code to create the dataframe)

if (STRING1 == "testing"){

var df2=df.withColumn("New",lit("astring"))

}

df2.show()

似乎我无法显示 df2，必须先声明 df2 ...我该怎么做？

【问题讨论】：

【解决方案1】：

问题是当你在 if 语句中声明一个变量时，作用域只在 if 块结束时才可用。

所以你可以在 if 块中移动 df2

var df=(some code to create the dataframe)

if (STRING1 == "testing"){
var df2=df.withColumn("New",lit("astring"))
df2.show()
}

或者只是在 if 语句之外声明 df2

var df=(some code to create the dataframe)

var df2= if (STRING1 == "testing"){
df.withColumn("New",lit("astring"))
} else df
df2.show()

【讨论】：