toLocalIterator

この DataFrame 内のすべての行を含む反復子を返します。 反復子は、この DataFrame 内の最大のパーティションと同じ量のメモリを消費します。 プリフェッチでは、最大 2 つの最大パーティションのメモリを消費する可能性があります。

構文

toLocalIterator(prefetchPartitions: bool = False)

パラメーター

パラメーター タイプ 説明
prefetchPartitions bool、省略可能 必要な前に、Spark で次のパーティションを事前にフェッチする必要がある場合。

返品

反復子: 行の反復子。

例示

df = spark.createDataFrame(
    [(14, "Tom"), (23, "Alice"), (16, "Bob")], ["age", "name"])
list(df.toLocalIterator())
# [Row(age=14, name='Tom'), Row(age=23, name='Alice'), Row(age=16, name='Bob')]