如何从结构类型数组的列中删除特定元素

Question

有一个表有 10 列。 列类型之一是 struct 并假设列名是 xyz。 xyz 包含元素数组。

例如， xyz 列包含 [a：值 1，b：值 2，c：值 3...] 现在我想从这个数组中删除 c 元素。

我该怎么做？

这段代码需要在pyspark/python中完成。

Answer 1

您必须使用df.select('xyz.*') 之类的东西来展平您的结构，然后根据需要使用array function、struct function 对其进行重组。