listagg

聚合函数:返回由分隔符分隔的非 null 输入值的串联。

有关相应的 Databricks SQL 函数,请参阅 listagg 聚合函数

Syntax

import pyspark.sql.functions as sf

sf.listagg(col=<col>)

# With delimiter
sf.listagg(col=<col>, delimiter=<delimiter>)

参数

参数 类型 Description
col pyspark.sql.Columnstr 要计算的目标列。
delimiter pyspark.sql.Columnstrbytes 可选。 用于分隔值的分隔符。 默认值为 None。

退货

pyspark.sql.Column:计算结果的列。

例子

示例 1:使用 listagg 函数。

import pyspark.sql.functions as sf
df = spark.createDataFrame([('a',), ('b',), (None,), ('c',)], ['strings'])
df.select(sf.listagg('strings')).show()
+----------------------+
|listagg(strings, NULL)|
+----------------------+
|                   abc|
+----------------------+

示例 2:将 listagg 函数与分隔符一起使用。

import pyspark.sql.functions as sf
df = spark.createDataFrame([('a',), ('b',), (None,), ('c',)], ['strings'])
df.select(sf.listagg('strings', ', ')).show()
+--------------------+
|listagg(strings, , )|
+--------------------+
|             a, b, c|
+--------------------+

示例 3:将 listagg 函数与二进制列和分隔符结合使用。

import pyspark.sql.functions as sf
df = spark.createDataFrame([(b'\x01',), (b'\x02',), (None,), (b'\x03',)], ['bytes'])
df.select(sf.listagg('bytes', b'\x42')).show()
+---------------------+
|listagg(bytes, X'42')|
+---------------------+
|     [01 42 02 42 03]|
+---------------------+

示例 4:对包含所有 None 值的列使用 listagg 函数。

import pyspark.sql.functions as sf
from pyspark.sql.types import StructType, StructField, StringType
schema = StructType([StructField("strings", StringType(), True)])
df = spark.createDataFrame([(None,), (None,), (None,), (None,)], schema=schema)
df.select(sf.listagg('strings')).show()
+----------------------+
|listagg(strings, NULL)|
+----------------------+
|                  NULL|
+----------------------+