tarefa de pipeline para Job

LakeFlow Os trabalhos fornecem uma abordagem processual para definir relacionamentos entre tarefas . LakeFlow O pipeline declarativo oferece uma abordagem declarativa para definir as relações entre o conjunto de dados e as transformações . Esta página descreve como o senhor pode programar um pipeline declarativo acionado LakeFlow para ser executado como uma tarefa em um trabalho, usando a interface do usuário de trabalhos, a interface do usuário do pipeline declarativo LakeFlow ou SQL.

nota

Um acionado pipeline é um pipeline que não é executado continuamente, mas deve ser acionado para começar. Uma tarefa de pipeline pode ser o mecanismo de acionamento de um pipeline acionado. Os pipelines contínuos não precisam ser acionados, portanto, acioná-los por meio de uma tarefa seria redundante. Para saber mais sobre pipeline acionado e contínuo, consulte Modo acionado vs. contínuo pipeline.

Configurar uma tarefa de pipeline com a UI do Jobs

LakeFlow O pipeline declarativo gerencia todas as configurações do código-fonte e compute na definição pipeline.

Para adicionar um pipeline a um trabalho, conclua as etapas a seguir:

1. Crie e nomeie uma nova tarefa e selecione pipeline para o tipo .
2. No menu suspenso do pipeline , selecione um pipeline existente pipeline.
3. Opcionalmente, o senhor pode acionar um refresh completo no pipeline.

important

Você só pode usar pipelines acionados com a tarefa Pipeline . Os pipelines contínuos não são suportados como tarefa de job.

Programar um pipeline com a UI pipeline

Adicionar um programar a um pipeline cria um trabalho com uma única tarefa pipeline. O senhor só pode configurar acionadores de programação baseados em tempo usando essa UI. Para obter opções de acionamento mais avançadas, consulte Configurar uma tarefa de pipeline com a interface do usuário do Jobs.

Configure uma tarefa do pipeline em um trabalho agendado usando a interface do usuário do pipeline, concluindo as etapas a seguir:

1. Em seu site workspace, clique em Jobs & pipeline na barra lateral.

2. Clique no nome do pipeline. A interface do usuário do pipeline é exibida.

3. Clique em programar .

   • Se não houver nenhum programa para o endereço pipeline, será exibida a caixa de diálogo New programar .
   • Se um ou mais programas já existirem, clique em Add programar .

4. Digite um nome exclusivo para o trabalho no campo Job name .

5. (Opcional) Atualize a frequência do programa.

   • Selecione Avançado para obter opções mais detalhadas, incluindo a sintaxe cron.

6. (Opcional) Em More options (Mais opções ), configure um ou mais endereços email para receber alertas sobre pipeline começar, sucesso ou falha.

7. Clique em Criar .

nota

Se o pipeline estiver incluído em um ou mais trabalhos programados, o botão programar mostrará o número do programar existente, por exemplo, programar (5) .