coalescer
Retorna a primeira coluna que não seja nula. Compatível com Spark Connect.
Para a função Databricks SQL correspondente, consulte a funçãocoalesce.
Sintaxe
Python
from pyspark.databricks.sql import functions as dbf
dbf.coalesce(*cols)
Parâmetros
Parâmetro | Tipo | Descrição |
|---|---|---|
|
| Lista de colunas para trabalhar. |
Devoluções
pyspark.sql.Column: valor da primeira coluna que não é nula.
Exemplos
Python
from pyspark.databricks.sql import functions as dbf
df = spark.createDataFrame([(None, None), (1, None), (None, 2)], ("a", "b"))
df.select('*', dbf.coalesce("a", df["b"])).show()
Output
+----+----+--------------+
| a| b|coalesce(a, b)|
+----+----+--------------+
|NULL|NULL| NULL|
| 1|NULL| 1|
|NULL| 2| 2|
+----+----+--------------+