Nota
L'accesso a questa pagina richiede l'autorizzazione. È possibile provare ad accedere o modificare le directory.
L'accesso a questa pagina richiede l'autorizzazione. È possibile provare a modificare le directory.
Raggruppa i dati in base alle colonne specificate per ottimizzare le prestazioni delle query.
Sintassi
clusterBy(*cols)
Parametri
| Parametro | Tipo | Descrizione |
|---|---|---|
*cols |
str o list | Nomi delle colonne in base al cluster. |
Restituzioni
DataFrameWriter
Examples
Scrivere un dataframe in un file Parquet con clustering.
import tempfile
with tempfile.TemporaryDirectory(prefix="clusterBy") as d:
spark.createDataFrame(
[{"age": 100, "name": "Alice"}, {"age": 120, "name": "Ruifeng Zheng"}]
).write.clusterBy("name").mode("overwrite").format("parquet").save(d)