LakeFlow Referência do desenvolvedor do pipeline declarativo
Esta seção contém referências e instruções para os desenvolvedores do pipeline LakeFlow Declarative.
O carregamento e as transformações de dados são implementados no pipeline LakeFlow Declarative por meio de consultas que definem tabelas de transmissão e visualizações materializadas. Para implementar essas consultas, o pipeline declarativo LakeFlow oferece suporte às interfaces SQL e Python. Como essas interfaces oferecem funcionalidade equivalente para a maioria dos casos de uso de processamento de dados, os desenvolvedores de pipeline podem escolher a interface com a qual se sentem mais confortáveis.
As páginas a seguir fornecem uma visão geral e referências para o desenvolvimento do código do pipeline declarativo LakeFlow:
tópico | Descrição |
---|---|
Uma visão geral do desenvolvimento do LakeFlow Pipeline declarativo em Python. | |
Documentação de referência do Python para o módulo | |
Uma visão geral do desenvolvimento do LakeFlow Pipeline declarativo em SQL. | |
Documentação de referência para a sintaxe SQL para o pipeline declarativo LakeFlow. | |
Gerenciar as dependências do Python para o pipeline declarativo do LakeFlow | Instruções para gerenciar Python biblioteca com LakeFlow Declarative pipeline. |
Converter o pipeline declarativo LakeFlow em um projeto de pacote ativo Databricks | Instruções para trabalhar com Databricks ativo Bundles with LakeFlow Declarative pipeline. |
Desenvolva o código do pipeline declarativo LakeFlow em seu ambiente de desenvolvimento local | Uma visão geral das opções para desenvolver localmente o código do pipeline LakeFlow Declarative. |