para o iterador local

Retorna um iterador que contém todas as linhas deste DataFrame. O iterador consumirá tanta memória quanto a maior partição neste DataFrame. Com o recurso de pré-busca, o consumo de memória pode chegar ao equivalente às duas maiores partições.

Sintaxe

toLocalIterator(prefetchPartitions: bool = False)

Parâmetros

Parâmetro	Tipo	Descrição
prefetchPartitions	booleano, opcional	Caso o Spark deva pré-buscar a próxima partição antes que ela seja necessária.

Devoluções

Iterador: Iterador de linhas.

Exemplos

Python

df = spark.createDataFrame(
    [(14, "Tom"), (23, "Alice"), (16, "Bob")], ["age", "name"])
list(df.toLocalIterator())
# [Row(age=14, name='Tom'), Row(age=23, name='Alice'), Row(age=16, name='Bob')]