Delta Live Tables pipeline tarefa for Job

Os trabalhos fornecem uma abordagem processual para definir relacionamentos entre tarefas. Delta Live Tables O pipeline fornece uma abordagem declarativa para definir relacionamentos entre o conjunto de dados e as transformações. Esta página descreve como o senhor pode programar o pipeline Delta Live Tables acionado para ser executado como uma tarefa em um trabalho Databricks, usando a UI de trabalhos, a UI Delta Live Tables pipeline ou SQL.

Observação

Um acionado Delta Live Tables pipeline é um pipeline que não é executado continuamente, mas deve ser acionado para começar. Uma tarefa de pipeline pode ser o mecanismo de acionamento de um pipeline acionado do Delta Live Tables. O pipeline contínuo não precisa ser acionado, portanto, acioná-lo por meio de uma tarefa seria redundante. Para saber mais sobre pipeline acionado e contínuo, consulte Modo acionado vs. contínuo pipeline .

Configurar uma tarefa de pipeline do Delta Live Tables com a interface do usuário do Jobs

Delta Live Tables O pipeline gerencia todas as configurações de código-fonte e compute na definição de pipeline.

Para adicionar um pipeline a um trabalho, conclua as etapas a seguir:

  1. Crie e nomeie uma nova tarefa e selecione o pipeline Delta Live Tables para o tipo.

  2. No menu suspenso do pipeline, selecione um site existente Delta Live Tables pipeline.

  3. Opcionalmente, o senhor pode acionar um refresh completo no Delta Live Tables pipeline.

Importante

Você só pode usar pipelines acionados com a tarefa Pipeline. Os pipelines contínuos não são suportados como tarefa de job.

Programar a Delta Live Tables pipeline com a UI pipeline

Adicionar um programar a um pipeline cria um trabalho com uma única tarefa pipeline. O senhor só pode configurar acionadores de programação baseados em tempo usando essa UI. Para obter opções de acionamento mais avançadas, consulte Configurar uma tarefa de pipeline do Delta Live Tables com a interface do usuário do Jobs.

Configure uma tarefa do pipeline em um trabalho agendado usando a interface do usuário do pipeline, concluindo as etapas a seguir:

  1. Clique em Delta Live Tables na barra lateral.

  2. Clique no nome do pipeline. A interface do usuário do pipeline é exibida.

  3. Clique em programar.

    • Se não houver nenhum programa para o endereço pipeline, será exibida a caixa de diálogo New programar.

    • Se um ou mais programas já existirem, clique em Add programar.

  4. Digite um nome exclusivo para o trabalho no campo Job name.

  5. (Opcional) Atualize a frequência do programa.

    • Selecione Avançado para obter opções mais detalhadas, incluindo a sintaxe cron.

  6. (Opcional) Em More options (Mais opções), configure um ou mais endereços email para receber alertas sobre pipeline começar, sucesso ou falha.

  7. Clique em Criar.

Observação

Se o pipeline estiver incluído em um ou mais trabalhos programados, o botão programar mostrará o número do programar existente, por exemplo, programar (5).

Adicione um programar a uma tabela materializada view ou de transmissão no Databricks SQL

A visualização materializada e as tabelas de transmissão definidas em Databricks SQL suportam programar com base no tempo especificado em CREATE ou ALTER comando.

Para obter detalhes, consulte os artigos a seguir: