options (DataStreamReader)

基になるデータ ソースの複数の入力オプションを追加します。

構文

options(**options)

パラメーター

返品

DataStreamReader

例示

spark.readStream.options(x="1", y=2)
# <...streaming.readwriter.DataStreamReader object ...>

オプションをディクショナリとして指定します。

spark.readStream.options(**{"k1": "v1", "k2": "v2"})
# <...streaming.readwriter.DataStreamReader object ...>

Rate ソースを使用して、10 個のパーティションで 1 秒あたり 10 行を生成します。

import time
q = spark.readStream.format("rate").options(
    rowsPerSecond=10, numPartitions=10
).load().writeStream.format("console").start()
time.sleep(3)
q.stop()