toPandas

Devolve o conteúdo deste DataFrame como Pandas pandas.DataFrame.

Sintaxe

toPandas()

Devoluções

pandas.DataFrame

Notes

Este método só deve ser usado se se esperar que o Pandas pandas.DataFrame resultante seja pequeno, pois todos os dados são carregados na memória do driver.

O uso com spark.sql.execution.arrow.pyspark.enabled=True é experimental.

Isto só está disponível se o Pandas estiver instalado e disponível.

Exemplos

df = spark.createDataFrame([(2, "Alice"), (5, "Bob")], schema=["age", "name"])
df.toPandas()
#    age   name
# 0    2  Alice
# 1    5    Bob