迄今为止的火花数据框列字符串[重复]

Question

我想将“yyyyMMdd”的火花数据框字符串列转换为带有火花会话（火花）的日期格式 - 不是火花上下文。

由于我没有使用 spark 上下文 (sc)，因此我无法使用以下代码，尽管它可以完全按照我的意愿进行操作：

.withColumn("column1",DF.to_date(F.col("column1"),"yyyyMMdd"))

由于我不想将列转换为时间戳，我也不想使用以下代码：

.withColumn("column1", unix_timestamp(col("column1"), "yyyyMMdd").cast("timestamp"))

最终目标是用日期格式的列替换之前的字符串列。

非常感谢！

Answer 1

以下代码可以正常工作：

.withColumn("column1", to_date(DF["column1"], 'yyyyMMdd'))

感谢您的关注！