DesignerLakeFlow

O Lakeflow Designer é uma experiência visual, sem código e nativa de AI para preparação e analítica de dados. Integrado diretamente no Databricks, ele permite que os usuários preparem e explorem dados por meio de uma tela de arrastar e soltar e linguagem natural. Os fluxos de trabalho que você constrói, chamados de preparações visuais de dados, são baseados em código pronto para produção e totalmente governados pelo Unity Catalog, para que seu trabalho transite suavemente do protótipo para a produção, sem a necessidade de engenharia reversa ou reconstrução.

• • O que é LakeFlow Designer?
  • Entenda a interface e os conceitos do Lakeflow Designer.
• • Tutorial: criar uma preparação de dados visuais
  • Construa sua primeira preparação de dados visual, da fonte até a saída, com dados de amostra.
• • A interface do Lakeflow Designer
  • Faça um tour pelo cabeçalho, painel esquerdo, tela, painel de configuração e painel de saída, e adicione e conecte operadores.
• • Usar o Genie Code no Lakeflow Designer
  • Crie e edite preparações de dados visuais em linguagem natural com o Genie Code.
• • Pré-visualize e refine os resultados no Lakeflow Designer
  • Visualize os resultados, execução a preparação completa dos dados visuais e edite os dados na tabela de resultados.
• • Use o índice no Lakeflow Designer
  • Encontre, filtre e classifique operadores e view código gerado.
• • Ingerir dados no LakeFlow Designer
  • Ingira dados em uma preparação de dados visuais.
• • Usar parâmetros no Lakeflow Designer
  • Use parâmetros para tornar uma preparação visual de dados reutilizável em diferentes ambientes.
• • operadores integrados no LakeFlow Designer
  • Explore os operadores integrados disponíveis em uma preparação de dados visuais.
• • Gerenciar arquivos de preparação de dados visuais no Lakeflow Designer
  • Crie, exporte, importe, renomeie, exclua e revise a história de arquivos de preparação de dados visuais.
• • Mover um arquivo de preparação de dados visuais para produção
  • Leve uma preparação de dados visuais para a produção com Git, jobs e Pacotes de Automação Declarativa.

Operadores personalizados

Você pode criar seus próprios operadores personalizados para usar no Lakeflow Designer.

Tarefa	Descrição
Operadores personalizados no Lakeflow Designer	Saiba como os operadores personalizados funcionam e como registro, atualizá-los e solucionar problemas neles.
Escrever lógica para operadores personalizados do Lakeflow Designer	Escreva a lógica da função Python ou Unity Catalog que um operador personalizado executa.
Referência de YAML de operador personalizado	Uma referência completa ao esquema YAML para operadores personalizados.
Tutorial: Operador da calculadora de juros compostos	Crie um operador personalizado que calcula juros compostos, usando Python em uma função definida pelo usuário (UDF) do Unity Catalog.
Tutorial: clusteringK-means	Crie um operador personalizado que use o agrupamento K-means, usando Python em uma função de tabela definida pelo usuário (UDTF) do Unity Catalog.
Tutorial: Enviar mensagem no Slack	Crie um operador personalizado que envie uma mensagem Slack, usando SQL em uma função definida pelo usuário (UDF) do Unity Catalog.
Tutorial: Demonstração de todos os widgets da interface do usuário	Crie um operador personalizado que use todos os widgets de interface disponíveis, usando Python em uma função definida pelo usuário (UDF) do Unity Catalog.
Tutorial: Operador de envio email do Gmail	Criar um operador personalizado que envia Gmail, usando Python em um python-run-function independente.

Tarefa	Descrição
Operadores personalizados no Lakeflow Designer	Saiba como os operadores personalizados funcionam e como registro, atualizá-los e solucionar problemas neles.
Escrever lógica para operadores personalizados do Lakeflow Designer	Escreva a lógica da função Python ou Unity Catalog que um operador personalizado executa.
Referência de YAML de operador personalizado	Uma referência completa ao esquema YAML para operadores personalizados.
Tutorial: Operador da calculadora de juros compostos	Crie um operador personalizado que calcula juros compostos, usando Python em uma função definida pelo usuário (UDF) do Unity Catalog.
Tutorial: clusteringK-means	Crie um operador personalizado que use o agrupamento K-means, usando Python em uma função de tabela definida pelo usuário (UDTF) do Unity Catalog.
Tutorial: Enviar mensagem no Slack	Crie um operador personalizado que envie uma mensagem Slack, usando SQL em uma função definida pelo usuário (UDF) do Unity Catalog.
Tutorial: Demonstração de todos os widgets da interface do usuário	Crie um operador personalizado que use todos os widgets de interface disponíveis, usando Python em uma função definida pelo usuário (UDF) do Unity Catalog.
Tutorial: Operador de envio email do Gmail	Criar um operador personalizado que envia Gmail, usando Python em um python-run-function independente.