PySpark 无法导入 collect_list，函数没有 collect_list 为什么？

【问题标题】：PySpark failing to Import collect_list, the functions no collect_list WHY?PySpark 无法导入 collect_list，函数没有 collect_list 为什么？
【发布时间】：2018-08-28 02:46:02
【问题描述】：

我想使用collect_list：

from pyspark.sql.functions import collect_list

但是函数包没有collect_list只有_collect_list_doc

【问题讨论】：

标签： python pyspark pyspark-sql

【解决方案1】：

像这样从 sql 中导入函数：

from pyspark.sql import functions as F

然后你可以使用 F.collect_set("field_name")

【讨论】：

这个不行，但是我找到了如何实现，只需要在sql语句中直接使用collect_list即可生效，没有import