excetoTodos
Retorna um novo DataFrame contendo as linhas presentes neste DataFrame, mas não em outro DataFrame, preservando as duplicatas.
Sintaxe
exceptAll(other: "DataFrame")
Parâmetros
Parâmetro | Tipo | Descrição |
|---|---|---|
| DataFrame | O outro DataFrame para comparação. |
Devoluções
DataFrame
Notas
Isso é equivalente a EXCEPT ALL em SQL. Como é padrão em SQL, essa função resolve as colunas por posição (e não por nome).
Exemplos
Python
df1 = spark.createDataFrame(
[("a", 1), ("a", 1), ("a", 1), ("a", 2), ("b", 3), ("c", 4)], ["C1", "C2"])
df2 = spark.createDataFrame([("a", 1), ("b", 3)], ["C1", "C2"])
df1.exceptAll(df2).show()
# +---+---+
# | C1| C2|
# +---+---+
# | a| 1|
# | a| 1|
# | a| 2|
# | c| 4|
# +---+---+