para a seta

Retorna o conteúdo deste DataFrame como PyArrow pyarrow.Table.

Adicionado no Databricks Runtime 15.3

Sintaxe

toArrow()

Devoluções

pyarrow.Table

Notas

Este método só deve ser usado se o PyArrow pyarrow.Table resultante for esperado ser pequeno, pois todos os dados são carregados na memória do driver.

Esta opção só está disponível se o PyArrow estiver instalado e disponível.

Esta API é uma API para desenvolvedores.

Exemplos

Python

df = spark.createDataFrame([(2, "Alice"), (5, "Bob")], schema=["age", "name"])
df.coalesce(1).toArrow()
# pyarrow.Table
# age: int64
# name: string
# ----
# age: [[2,5]]
# name: [["Alice","Bob"]]