O que é LakeFlow Designer?
O Lakeflow Designer fornece uma tela visual para que analistas realizem análise de dados, preparação e automação básica. No Designer, você cria arquivos visuais de preparação de dados, cada um composto por uma sequência de operadores (como filtro, join e transformação) organizados como um gráfico para produzir um resultado. Todas as transformações são respaldadas por código, o que permite versionar arquivos no Git e programá-los como jobs para movê-los para produção.
Com o LakeFlow Designer, você pode:
- Projete o fluxo de trabalho usando uma tela de arrastar e soltar.
- Transformação de dados sem escrever código usando operadores integrados para filtrar, agregar, unir e remodelar dados.
- Use o Genie Code para gerar ou refinar transformações na preparação visual dos seus dados usando linguagem natural.
- Pré-visualize cada passo intermediário sem executar toda a preparação visual de dados.
Para construir sua primeira preparação de dados visuais, veja Tutorial: Construir uma preparação de dados visuais.
Faça um tour pela interface
O editor do Lakeflow Designer possui as seguintes áreas:
- Painel esquerdo : navegue pelos operadores, encontre operadores no sumário, navegue pelos arquivos do workspace e pelos dados do catálogo e defina parâmetros.
- Cabeçalho e barra de ferramentas : Escolha compute, programe a preparação de dados visuais, defina limites de pré-visualização e aplique zoom e disposição automática à tela.
- Tela : Adicione operadores e conecte-os para criar um fluxo de trabalho visual.
- Painel de configuração : preencha os detalhes do operador selecionado. Ele é aberto à direita.
- Painel de saída : view e compare os dados de entrada e saída do operador selecionado. Ele abre na parte inferior.
- prompt do Genie Code : Descreva as alterações em linguagem natural.
Para um tour guiado por cada área, consulte A interface do Lakeflow Designer.
conceitos-chave
Preparação de dados visuais
Uma preparação de dados visuais é um arquivo do Lakeflow Designer que contém um fluxo de trabalho de dados, desde fontes até transformações e saídas. Veja Gerenciar arquivos de preparação de dados visuais no Lakeflow Designer.
Operadores
Operadores são os blocos de construção de uma preparação de dados visuais. Cada operador realiza uma ação, como um join, filtro ou escrita, e você o configura para seus dados. O Lakeflow Designer inclui operadores integrados para tarefas comuns e você pode adicionar seus próprios operadores definidos pelo usuário.
Conexões
Conexões Link operadores e definem como os dados fluem entre eles, da esquerda para a direita. Consulte Conectar operadores.
Pré-visualizações
O Lakeflow Designer pré-visualiza cada operador em uma amostra de linhas para que você possa verificar cada passo sem executar toda a preparação visual de dados. Consulte Pré-visualizar e refinar resultados no Lakeflow Designer.
Código gerado
Cada preparação de dados visuais é respaldada por código gerado, para que você possa versioná-la no Git e programá-la como um job. Veja Mover um arquivo de preparação visual de dados para a produção.
CódigoGenie
O Genie Code é o assistente de AI no Lakeflow Designer. Descreva uma transformação em linguagem natural e o Genie Code adicionará ou alterará operadores para você. Veja Usar o Genie Code no Lakeflow Designer.