opção (DataFrameReader)

Adiciona uma opção de entrada para a fonte de dados subjacente.

Sintaxe

option(key, value)

Parâmetros

Parâmetro Tipo Descrição
key str A tecla de opção.
value força, inteligência, flutuação ou bool O valor da opção.

Devoluções

DataFrameReader

Exemplos

Lê um ficheiro CSV com as nullValue opções definidas.

import tempfile
with tempfile.TemporaryDirectory(prefix="option") as d:
    df = spark.createDataFrame([{"age": 100, "name": "Alice"}])
    df.write.mode("overwrite").format("csv").save(d)

    spark.read.schema(df.schema).option(
        "nullValue", "Alice").format('csv').load(d).show()
    # +---+----+
    # |age|name|
    # +---+----+
    # |100|NULL|
    # +---+----+