orc (DataStreamReader)
Carrega uma transmissão de arquivo ORC e retorna o resultado como um DataFrame.
Sintaxe
orc(path, **options)
Parâmetros
Parâmetro | Tipo | Descrição |
|---|---|---|
| str | Caminho para o dataset ORC . |
Devoluções
DataFrame
Exemplos
Carregue uma transmissão de um arquivo ORC temporário:
Python
import tempfile
import time
with tempfile.TemporaryDirectory(prefix="orc") as d:
spark.range(10).write.mode("overwrite").format("orc").save(d)
q = spark.readStream.schema("id LONG").orc(d).writeStream.format("console").start()
time.sleep(3)
q.stop()