O que é LakeFlow Designer?
Visualização
Este recurso está em Pré-visualização Pública.
LakeFlow Designer fornece uma tela visual para o analista realizar análise de dados, preparação e automação básica. No Designer, você cria preparações de dados visuais, cada uma composta por uma sequência de operadores (como filtrar, join e transformar) organizados como um DAG (grafo acíclico direcionado) para produzir um resultado. Todas as transformações são apoiadas por código, que suporta a movimentação do fluxo de trabalho para a produção.
Com o LakeFlow Designer, você pode:
- Crie preparações visuais de dados usando a tela de arrastar e soltar.
- Transformação de dados sem escrever código usando operadores integrados para filtrar, agregar, unir e remodelar dados.
- Use o Genie Code para gerar ou refinar transformações na preparação de dados visuais usando linguagem natural.
- Visualize cada etapa intermediária sem executar todo o pipeline.

Na imagem acima, você pode ver:
- A tela de arrastar e soltar
- Dois operadores
- Uma conexão entre duas operadoras
- O painel de saída
- O perfil de dados da saída
- O prompt Genie Code
conceitos-chave
A tela
A tela é o workspace principal onde você adiciona, configura e conecta operadores para construir sua preparação visual de dados.
Para navegar na tela:
- Deslizar : Mantenha a barra de espaço pressionada enquanto clica e arrasta, ou deslize dois dedos no trackpad.
- Zoom : Use o gesto de pinça ou estique o dedo no trackpad, ou mantenha pressionada a tecla Ctrl e role a tela.
A tela possui uma barra de ferramentas no canto inferior esquerdo com ferramentas de navegação: Aumente o zoom,
diminuir o zoom,
view ajustada,
autodisposição e
Modo de arrastar.
Clique com o botão direito em qualquer lugar da tela para acessar ações comuns, incluindo adicionar operadores, desfazer e refazer, disposição automática, ajustar view e abrir o painel de código.
Você também pode arrastar e soltar um arquivo Excel ou CSV diretamente na tela para criar um operador de origem para esse arquivo.
Operadores
Os operadores são os elementos fundamentais da preparação visual de dados. Um operador é uma ação como join, transformação ou filtragem. Você encadeia operadores na tela para construir um fluxo de trabalho. Cada operador é configurável com base em seu tipo.

LakeFlow Designer inclui operadores integrados para tarefas comuns de transformação de dados. Para mais detalhes, consulte os operadores integrados no LakeFlow Designer.
Conexões
As conexões definem como os dados fluem entre os operadores. Para criar uma conexão, arraste o pequeno círculo na borda direita de um operador até o pequeno círculo na borda esquerda de outro operador. Isso especifica que os dados fluem do primeiro operador para o segundo. Os dados fluem da esquerda para a direita na preparação visual de dados. Alguns operadores, como join e Combine , aceitam múltiplas conexões de entrada.

O painel de saída
O painel de resultados aparece na parte inferior da tela quando você seleciona um operador. Selecione qualquer operador para visualizar os resultados na janela de saída na parte inferior da tela. Para a maioria dos tipos de operadores, os dados de entrada ficam à esquerda e os dados de saída à direita.
Por default, os operadores executam em uma amostra de dados de até 1.000 linhas. Para executar com o dataset completo, clique em datasetde amostra no painel de saída e alterne para datasetcompleto .

Executar o processo com o dataset completo executa novamente todos os operadores anteriores com o dataset completo e ilimitado, o que pode levar muito tempo.
No painel de saída, você pode optar por exibir detalhes dos dados em sua saída. No canto superior direito do painel de saída, escolha o Botão na barra lateral para abrir os detalhes da seleção. Selecione um subconjunto dos seus dados para ver detalhes sobre a sua seleção.

CódigoGenie
O Genie Code permite descrever transformações em linguagem natural. Todas as interações são de natureza agentiva e utilizam o contexto da plataforma Databricks.

Digite um comando para gerar ou modificar transformações. Para view o histórico das interações do Código Genie e obter mais detalhes sobre cada resposta, abra o painel lateral do Código Genie clicando em na barra lateral direita. Quando o painel lateral está aberto, a barra de ferramentas integrada à tela é minimizada.