O que é LakeFlow Designer?
Visualização
Este recurso está em Pré-visualização Pública.
Lakeflow Designer fornece uma tela visual para o analista realizar análise de dados, preparação e automação básica. No Designer, você cria arquivos visuais de preparação de dados, cada um composto por uma sequência de operadores (como filtrar, join e transformar) organizados como um DAG (grafo acíclico direcionado) para produzir um resultado. Todas as transformações são respaldadas por código, o que permite versionar arquivos no Git e programá-los como Jobs para migrá-los perfeitamente para produção.
Com o LakeFlow Designer, você pode:
- Projete o fluxo de trabalho usando uma tela de arrastar e soltar.
- Transformação de dados sem escrever código usando operadores integrados para filtrar, agregar, unir e remodelar dados.
- Use o Genie Code para gerar ou refinar transformações na preparação visual dos seus dados usando linguagem natural.
- Visualize cada etapa intermediária sem executar todo o pipeline.
Na imagem acima, você pode ver:
- A tela de arrastar e soltar
- Dois operadores
- Uma conexão entre duas operadoras
- O painel de saída
- O perfil de dados da saída
- O prompt Genie Code
conceitos-chave
A tela
A tela é o workspace principal onde você adiciona, configura e conecta operadores para construir sua preparação visual de dados.
Para navegar na tela:
- Deslizar : Mantenha a barra de espaço pressionada enquanto clica e arrasta, ou deslize dois dedos no trackpad.
- Zoom : Use o gesto de pinça ou estique o dedo no trackpad, ou mantenha pressionada a tecla Ctrl e role a tela.
A barra de ferramentas da tela está localizada no cabeçalho, juntamente com as ferramentas de navegação da tela: 
Aumente o zoom, 
diminuir o zoom, 
view ajustada, 
autodisposição e 
Modo de arrastar.
Clique com o botão direito em qualquer lugar da tela para acessar ações comuns, incluindo adicionar operadores, desfazer e refazer, disposição automática, ajustar view e abrir o painel de código.
Você também pode arrastar e soltar um arquivo Excel ou CSV diretamente na tela para criar um operador de origem para esse arquivo.
Operadores
Os operadores são os elementos fundamentais da preparação visual de dados. Um operador é uma ação como join, transformação ou filtragem. Você encadeia operadores na tela para construir um fluxo de trabalho. Cada operador é configurável com base em seu tipo.
LakeFlow Designer inclui operadores integrados para tarefas comuns de transformação de dados. Para mais detalhes, consulte os operadores integrados no LakeFlow Designer.
Conexões
As conexões definem como os dados fluem entre os operadores. Para criar uma conexão, arraste o pequeno círculo na borda direita de um operador até o pequeno círculo na borda esquerda de outro operador. Isso especifica que os dados fluem do primeiro operador para o segundo. Os dados fluem da esquerda para a direita durante a preparação visual dos dados. Alguns operadores, como join e Combine , aceitam múltiplas conexões de entrada.
O painel de saída
O painel de resultados aparece na parte inferior da tela quando você seleciona um operador. Selecione qualquer operador para visualizar os resultados na janela de saída na parte inferior da tela. Para a maioria dos tipos de operadores, os dados de entrada ficam à esquerda e os dados de saída à direita.
Por default, os operadores processam uma amostra limitada de dados. Use a dropdown suspensa "Linhas digitalizadas" no painel de saída para controlar quantas linhas processar:
- Linhas verificadas: Limite : Processa as primeiras N linhas de entrada. Especifique o número de linhas no campo ao lado da dropdown.
- Linhas verificadas: Máx .: Processa todas as linhas de entrada.
Executando com linhas analisadas: o Max executa novamente todos os operadores anteriores com o dataset completo e ilimitado, o que pode levar muito tempo.
No painel de saída, você pode optar por exibir detalhes dos dados em sua saída. No canto superior direito do painel de saída, escolha o 
Botão na barra lateral para abrir os detalhes da seleção. Selecione um subconjunto dos seus dados para ver detalhes sobre a sua seleção.
CódigoGenie
O Genie Code permite descrever transformações em linguagem natural. Todas as interações são de natureza agentiva e utilizam o contexto da plataforma Databricks.
Digite um comando para gerar ou modificar transformações. Para view o histórico das interações do Código Genie e obter mais detalhes sobre cada resposta, abra o painel lateral do Código Genie clicando em 
na barra lateral direita. Quando o painel lateral está aberto, a barra de ferramentas integrada à tela é minimizada.