exceptAll

重複を保持しながら、この DataFrame 内の行を含む新しい DataFrame を返しますが、別の DataFrame には含まれません。

構文

exceptAll(other: "DataFrame")

パラメーター

パラメーター タイプ 説明
other DataFrame 比較する他の DataFrame。

返品

DataFrame

メモ

これは、SQL での EXCEPT ALL と同じです。 SQL の標準として、この関数は列を (名前ではなく) 位置で解決します。

例示

df1 = spark.createDataFrame(
        [("a", 1), ("a", 1), ("a", 1), ("a", 2), ("b",  3), ("c", 4)], ["C1", "C2"])
df2 = spark.createDataFrame([("a", 1), ("b", 3)], ["C1", "C2"])
df1.exceptAll(df2).show()
# +---+---+
# | C1| C2|
# +---+---+
# |  a|  1|
# |  a|  1|
# |  a|  2|
# |  c|  4|
# +---+---+