Pular para o conteúdo principal

monitoramento e observabilidade para LakeFlow Jobs

Esta página descreve os recursos disponíveis na interface Databricks para view os trabalhos aos quais você tem acesso, view o histórico de execução de um trabalho e view os detalhes da execução desse trabalho. Para configurar notificações para um Job, consulte Adicionar notificações a um Job.

Para saber como usar o Databricks CLI a view Job e executar o Job, execute o CLI comando databricks jobs list -h, databricks jobs get -h e databricks jobs run-now -h. Para saber mais sobre como usar a API de Jobs, consulte a API de Jobs.

Se o senhor tiver acesso ao esquema system.lakeflow, também poderá view e consultar os registros de execução e tarefa do trabalho em todo o seu account. Consulte a referência da tabela do sistema Jobs. O senhor também pode join as tabelas do sistema Job com as tabelas de faturamento para monitorar o custo do Job em seu account. Consulte Monitorar custos do trabalho & desempenho com tabelas do sistema.

ver Trabalho e pipeline

Para view a lista de trabalhos aos quais o senhor tem acesso, clique em ícone de fluxo de trabalho. Jobs & pipeline na barra lateral. Os trabalhos & pipeline tab na interface de usuário LakeFlow Jobs lista informações sobre todos os trabalhos e pipelines disponíveis, como o criador, o acionador (se houver) e o resultado das últimas cinco execuções.

Para alterar as colunas exibidas na lista, clique Ícone de configurações de coluna e selecione ou desmarque as colunas.

info

Prévia

A lista unificada de Jobs e pipeline está em Visualização Pública. Você pode desabilitar o recurso e retornar à experiência default desabilitando Trabalhos e pipeline: gerenciamento, pesquisa e filtragem unificados . Consulte as visualizações do gerenciamento Databricks para obter mais informações.

O senhor pode filtrar o trabalho na lista de pipeline do Jobs & , conforme mostrado na captura de tela a seguir.

Lista de trabalhos view com textos explicativos.

  1. Pesquisa de texto : a pesquisa por palavra-chave é compatível com os campos Name (Nome ) e Job ID (ID) . Para pesquisar uma tag criada com um key e um valor, o senhor pode pesquisar pelo key, pelo valor ou pelo key e pelo valor. Por exemplo, para uma tag com key department e o valor finance, o senhor pode pesquisar department ou finance para encontrar um trabalho correspondente. Para pesquisar pelo endereço key e pelo valor, digite key e o valor separados por dois pontos (por exemplo, department:finance).
  2. Tipo : selecione apenas Job, pipeline ou todos.
  3. Owner (Proprietário ): selecione apenas o Job ou o pipeline que o senhor possui.
  4. Favorites (Favoritos ): seleciona todos os trabalhos ou pipelines que o senhor marcou como favoritos.
  5. Etiquetas : Use etiquetas. Para pesquisar por tag, você pode usar o menu suspenso de tags para filtrar até cinco tags ao mesmo tempo ou usar diretamente a pesquisa por palavra-chave.
  6. execução as : Filtrar por até dois valores run as.

Para iniciar um trabalho ou pipeline, clique em Ícone de reprodução botão de reprodução. Para interromper um fluxo de trabalho, clique em Ícone de parada Botão de parar. Para acessar outras opções, clique no menu de kebab.Ícone do menu Kebab.. Por exemplo, você pode excluir o fluxo de trabalho ou acessar as configurações de um pipeline a partir deste menu.

visualizar a execução de um único Job

O senhor pode view uma lista de execuções em andamento e concluídas recentemente para um trabalho ao qual tenha acesso, incluindo execuções iniciadas por ferramentas externas de orquestração, como Apache Airflow ou Azure Data Factory. Para view a lista de execução de trabalhos recentes:

  1. Na barra lateral do site Databricks workspace, clique em Jobs & pipeline .

  2. Opcionalmente, selecione os filtros Empregos e de minha propriedade .

  3. Clique no link Nome do seu trabalho.

    A execução tab é exibida com matriz e visualização de lista de execuções ativas e concluídas.

A matriz view mostra um histórico de execução do trabalho, incluindo cada tarefa do trabalho.

Matriz de empregos view.

A linha de duração total da execução da matriz exibe a duração total da execução e o estado da execução. Para view detalhes da execução, incluindo a hora de início, a duração e o status, passe o mouse sobre a barra na linha de duração total da execução .

Cada célula na linha de tarefas representa uma tarefa e o status correspondente da tarefa. Para acessar view os detalhes de cada tarefa, inclusive a hora de início, duração, agrupamento e status, passe o mouse sobre a célula dessa tarefa.

As barras de execução do trabalho e de execução da tarefa são codificadas por cores para indicar o status da execução. Execuções bem-sucedidas são verdes. Execuções malsucedidas são representadas em vermelho, execuções ignoradas em rosa e aguardando nova tentativa em amarelo. Os itens pendentes, cancelados ou com tempo limite expirado aparecem em cinza. A altura das barras individuais de execução do trabalho e de execução da tarefa indica visualmente a duração da execução.

Se o senhor tiver configurado um tempo de conclusão esperado, a matriz view exibirá um aviso quando a duração de uma execução exceder o tempo configurado.

Em default, a lista de execução view exibe o seguinte:

  • A hora de começar para a execução.
  • O identificador de execução. Consulte a seção "URL e ID de execuçãoJob para saber como encontrar e compartilhar a URL de execução.
  • Se a execução foi acionada por um Job programar ou uma solicitação API, ou se foi iniciada manualmente.
  • O tempo decorrido para um trabalho em execução no momento ou o tempo total de execução para uma execução concluída. Um aviso será exibido se a duração exceder o tempo de conclusão esperado configurado.
  • O status da execução: enfileirada , pendente , em execução , ignorada , bem-sucedida , com falha , com tempo limite , cancelada ou cancelada .
  • O código de erro com o qual a execução foi encerrada.
  • Os parâmetros de execução.

A execução ativa no momento exibe um botão de parada. Para interromper todas as execuções ativas e em fila, selecione Cancelar execução ou Cancelar todas as execuções em fila no menu suspenso.

Para acessar ações específicas de contexto para a execução, clique no menu kebab Ícone do menu Kebab. (por exemplo, para interromper uma execução ativa ou excluir uma execução concluída).

Para alterar as colunas exibidas na lista de execução view, clique em Ícone de configurações e selecione ou desmarque as colunas.

Para acessar view os detalhes de uma execução de trabalho, clique no link da execução na coluna começar time na lista de execuções view. Para acessar view detalhes da execução bem-sucedida mais recente desse trabalho, clique em Go to the latest successful execution (Ir para a última execução bem-sucedida ).

Databricks mantém um histórico da execução de seu trabalho por até 60 dias. Se o senhor precisar preservar a execução do trabalho, o site Databricks recomenda a exportação dos resultados antes que eles expirem. Para obter mais informações, consulte Exportar resultados da execução do trabalho.

Ver detalhes da execução do trabalho

A página de detalhes da execução do trabalho contém a saída do trabalho e links para logs, incluindo informações sobre o sucesso ou a falha de cada tarefa na execução do trabalho. O senhor pode acessar os detalhes da execução do trabalho no site tab para o trabalho.

Para view detalhes da execução do trabalho a partir da execução tab, clique no link da execução na coluna começar time na lista de execuções view. Para retornar à execução tab do trabalho, clique no valor Job ID .

Os trabalhos com várias tarefas também têm um gráfico, uma linha do tempo e uma lista view.

gráfico view

Clique em um nó de tarefa no gráfico para acessar view detalhes da execução da tarefa, inclusive:

  • detalhes da tarefa, incluindo execução como, como o trabalho foi lançado, hora de início, hora de término, duração e status.
  • O código-fonte.
  • O clustering que executa a tarefa e os links para sua história de consulta e logs.
  • métricas para a tarefa.

Jobs gráfico view.

Linha do tempo view

Os trabalhos que contêm várias tarefas têm uma linha do tempo view para identificar as tarefas que estão demorando muito para serem concluídas, entender as dependências e a sobreposição para ajudar a depurar e otimizar esses trabalhos.

Linha do tempo de empregos view.

Para trabalhos serverless , as consultas e os perfis de consulta são integrados à view da linha do tempo. Clique na seta ao lado do nome de uma tarefa para view as instruções de consulta e sua duração e, em seguida, clique em uma instrução para navegar até o perfil de consulta correspondente. Consulte visualizar detalhes da consulta para execução do trabalho.

Lista view

Por default, a view em lista mostra o status, nome, tipo, recurso, duração e dependências. Você pode adicionar e remover colunas nesta view.

Você pode pesquisar uma tarefa pelo nome, filtrar pelo status da tarefa ou pelo tipo de tarefa e classificar as tarefas por status, nome ou duração.

Clique no valor Job ID para retornar à execução tab do Job.

Lista de empregos view.

Como o site Databricks determina o status de execução do trabalho?

Databricks determina se a execução de um Job foi bem-sucedida com base no resultado da tarefa folha do Job. Uma tarefa folha é uma tarefa que não possui dependências subsequentes. A execução de um Job pode ter um dos seguintes resultados:

  • Foi bem-sucedido: Todas as tarefas foram bem-sucedidas.
  • Foi bem-sucedido com falhas: Algumas tarefas falharam, mas todas as tarefas de folhas foram bem-sucedidas.
  • Falhou: Uma ou mais tarefas de folha falharam.
  • Ignorado: A execução do trabalho foi ignorada (por exemplo, uma tarefa pode ser ignorada porque o senhor excedeu a execução máxima concorrente para o seu trabalho ou para o seu workspace).
  • Tempo esgotado: A execução do trabalho demorou muito para ser concluída e atingiu o tempo limite.
  • Cancelado: A execução do trabalho foi cancelada (por exemplo, um usuário cancelou manualmente a execução em andamento).

Tarefas individuais também podem ser encerradas com o status Disabled quando você as desativa explicitamente nas configurações do Job, ou quando LakeFlow Jobs as desativa para uma execução porque uma tarefa anterior está desativada. Tarefa desativada mostra um Circule o ícone grande. no canto superior direito do DAG. Consulte Tarefa desativada em Tarefas LakeFlow.

view métricas para transmissão tarefa

info

prévia

A observabilidade da transmissão para LakeFlow Jobs está em Public Preview.

Ao acessar view os detalhes da execução do trabalho, o senhor pode obter dados sobre cargas de trabalho de transmissão com métricas de observabilidade de transmissão na UI do trabalho. Essas métricas incluem segundos de backlog, bytes de backlog, registros de backlog e arquivos de backlog para fontes suportadas por Spark transmissão estruturada, incluindo Apache Kafka, Amazon Kinesis, Auto Loader, Google Pub/Sub e tabelas Delta. métricas são exibidas como gráficos no painel direito quando o senhor acessa view os detalhes de execução de uma tarefa. As métricas mostradas em cada gráfico são valores máximos agregados por minuto e podem incluir até as 48 horas anteriores.

Cada fonte de transmissão suporta apenas métricas específicas. As métricas não suportadas por uma fonte de transmissão não estão disponíveis para view na UI. A tabela a seguir mostra as métricas disponíveis para as fontes de transmissão suportadas:

Origem

bytes da lista de pendências

registros de pendências

segundos de atraso

arquivos de lista de pendências

Kafka

Kinesis

Delta

Carregador automático

Google Pub/Sub

O senhor também pode especificar limites para cada transmissão métrica e configurar notificações se uma transmissão exceder um limite durante a execução de uma tarefa. Consulte Configurar notificações para trabalhos lentos.

Para view transmissão métricas para a execução de uma tarefa que transmite dados de uma das fontes de transmissão estruturadas suportadas:

  1. Na página de detalhes da execuçãoJob , clique na tarefa para a qual o senhor deseja view métricas.
  2. Clique em métricas tab no painel de execução de tarefas .
  3. Para abrir o gráfico de uma métrica, clique em Caret direito ao lado do nome da métrica.
  4. Para view as métricas de uma transmissão específica, insira o ID da transmissão na caixa de texto Filter by transmission (Filtrar por transmissão ). O senhor pode encontrar o ID da transmissão na saída da execução do trabalho.
  5. Para alterar o período de tempo para as métricas gráficas, use o menu suspenso de tempo.
  6. Para percorrer a transmissão, se a execução contiver mais de dez transmissões, clique em Next ou Previous .

limitações de observabilidade da transmissão

  • As métricas são atualizadas a cada minuto, a menos que uma execução tenha mais de quatro transmissões. Se uma execução tiver mais de quatro transmissões, as métricas serão atualizadas a cada cinco minutos.
  • As métricas são coletadas apenas para as primeiras cinquenta transmissões em cada execução.
  • As métricas são coletadas em intervalos de um segundo. As métricas podem não ser visíveis se a configuração do site triggerInterval for inferior a um segundo.
  • A maioria das fontes de dados coleta transmissão métricas pelo site default. No entanto, para outros, o senhor deve ativar esse recurso. Se a sua fonte de dados não estiver coletando transmissões métricas, defina o sinalizador spark.sql.streaming.metricsEnabled como True.

visualizar métricas de desempenho de consulta para trabalho serverless

info

Beta

Este recurso está em versão Beta. Os administradores do espaço de trabalho podem controlar o acesso a este recurso na página de Pré-visualizações . Veja as prévias do Gerenciador Databricks.

Quando você executa um trabalho serverless , Databricks exibe métricas de perfil de consulta selecionadas e percepções de desempenho diretamente na interface do usuário de execução do trabalho, para que você possa identificar problemas de desempenho sem abrir um perfil de consulta separado para cada consulta. Use essas métricas para investigar por que uma execução é lenta ou para comparar o desempenho entre duas execuções.

Antes de poder view estes itens:

  • A pré-visualização da observabilidade de carga de trabalho sem servidor aprimorada deve estar ativada para seu workspace. Os administradores do espaço de trabalho podem habilitá-lo na página de pré-visualizações.
  • Seu workspace deve ter acesso à Consulta de percepções de desempenho. Sem isso, os indicadores de lâmpada não aparecerão, embora as métricas agregadas (linhas lidas, linhas gravadas e contagem total de consultas) ainda sejam exibidas.

Databricks exibe as seguintes métricas, agregadas a partir das consultas executadas em um Job serverless :

  • Linhas lidas e linhas gravadas por execução de tarefa.
  • Número total de consultas por execução de tarefa.
  • Um indicador de percepções de desempenho (lâmpada) em uma tarefa quando uma ou mais consultas nessa tarefa possuem percepções de desempenho.

Essas métricas aparecem em locais diferentes, dependendo de como você está visualizando a execução:

Onde aparece

O que você vê

tarefa execução barra lateral

Linhas lidas e escritas, contagem total de consultas e indicador de percepções para execução da tarefa.

viewDAG

Um emblema de lâmpada em um nó de tarefa quando alguma das consultas da tarefa tiver percepções de desempenho.

viewem linha do tempo

Uma lâmpada ao lado do nome da tarefa com uma contagem de em todas as consultas da tarefa, além de uma lâmpada em cada consulta dentro da tarefa que foi.

viewem lista

Uma lâmpada na coluna percepções quando alguma das consultas da tarefa possui percepções de desempenho. Se você não visualizar esta coluna, adicione-a através do seletor de colunas.

nota

A view da linha do tempo agora está disponível para trabalhos individuais como parte desta versão Beta. Anteriormente, apenas os trabalhos com múltiplas tarefas possuíam uma view de linha do tempo.

Comportamento ao clicar e ao passar o cursor:

  • Na viewLinha do tempo , passe o mouse sobre uma tarefa para ver suas métricas agregadas e quaisquer percepções de desempenho para as consultas da tarefa.
  • Na viewDAG ou na viewem lista , clique no ícone de lâmpada em uma tarefa para abrir a viewLinha do tempo com as consultas dessa tarefa expandidas.
  • Na viewLinha do Tempo , clique no texto da consulta que possui um ícone de lâmpada para abrir um painel lateral com uma visão geral do desempenho observado para essa consulta.

Para investigar por que a execução de um Job serverless é mais lenta do que o esperado:

  1. Abra a execução do Job.

  2. Mude para a viewda Linha do Tempo .

  3. Identifique tarefas que demoram mais do que o esperado com base na distribuição de duração.

  4. Passe o cursor sobre uma tarefa de longa duração para ver:

    • Linhas lidas e linhas gravadas — para verificar se a tarefa processou mais dados do que o normal.
    • Número total de consultas — para identificar mudanças no padrão da carga de trabalho.
    • O indicador de percepções de desempenho — para detectar regressões ou alterações ineficientes no código.
  5. Se o aumento na duração for explicado por um maior volume de dados, a desaceleração pode ser esperada. Caso contrário, expanda a tarefa na linha do tempo para ver suas consultas individuais. Consultas com detecção de suspeita mostram uma lâmpada ao lado delas.

  6. Clique no texto da consulta, que possui um ícone de lâmpada, para abrir um painel lateral com os resultados de desempenho daquela consulta.

  7. Aplique as alterações recomendadas e execute o Job novamente para confirmar se o problema foi resolvido.

Para a lista completa de percepções e o que elas significam, consulte Consultar percepções de desempenho. Para obter detalhes mais aprofundados sobre a execução da consulta, consulte Perfil da consulta.

dica

Comparando duas execuções

Essas mesmas métricas facilitam a identificação de diferenças entre uma execução lenta e uma execução anterior rápida. Abra as duas execuções lado a lado e compare:

  • Linhas lidas e linhas gravadas para identificar alterações no volume de dados.
  • Número total de consultas para identificar mudanças no padrão da carga de trabalho.
  • percepções de desempenho para identificar ineficiências introduzidas desde a execução anterior.

Limitações das métricas de desempenho de consulta

  • Essas métricas e percepções se aplicam apenas a trabalhos LakeFlow serverless . A execução Job na compute clássica não mostra esta informação.
  • As métricas são agregadas nas primeiras 100 consultas em uma execução de Job. Se uma execução tiver mais consultas, apenas as 100 primeiras serão refletidas nos totais.

view tarefa execução história

Para view a história da execução de uma tarefa, incluindo execuções bem-sucedidas e malsucedidas:

  1. Clique em uma tarefa na página de detalhes da execuçãoJob . A página com os detalhes da execução da tarefa é exibida.
  2. Selecione a tarefa execução no menu suspenso execução história.

Veja a história da tarefa execução em For each tarefa

O acesso à história de execução de uma tarefa For each é o mesmo que para uma tarefa padrão LakeFlow Jobs. Você pode clicar no nó da tarefa For each na página de detalhes da execuçãoJob ou na célula correspondente na view da matriz. No entanto, ao contrário de uma tarefa padrão, os detalhes de execução de uma tarefa For each são apresentados como uma tabela das iterações da tarefa aninhada.

Para view somente iterações com falha, clique em Only failed iterations (Somente iterações com falha ).

Para view o resultado de uma iteração, clique nos valores de tempo inicial ou tempo final da iteração.

Jobs Para cada tarefa executar história.

Veja o desempenho recente em todos os cargos e processos.

Você pode view uma lista das execuções em andamento e das execuções concluídas recentemente para todos os trabalhos e pipelines em um workspace ao qual você tem acesso, incluindo execuções iniciadas por ferramentas de orquestração externas, como Apache Airflow ou Azure Data Factory. Para view a lista de execuções recentes:

  1. Clique em ícone de fluxo de trabalho. Jobs & pipeline na barra lateral.
  2. Clique na tab de execução para exibir o gráfico de contagem de execução concluída e a lista de execução de Job e pipeline .
  3. (Opcional) Clique em "Tarefas" ou "Pipeline" para filtrar a lista por tipo.

Lista de execução unificada.

A lista de execuções inclui opções de filtragem na parte superior, um gráfico das execuções concluídas recentemente e dos 5 principais erros, além de uma lista das execuções finalizadas recentemente.

Você pode filtrar por:

  • Nome da tarefa ou pipeline.
  • Todos , Empregos ou pipeline .
  • Tipo de pipeline (ETL, Ingestão, MV/ST ou Sincronização de Tabela de Banco de Dados).
  • A execução como usuário.
  • ID de execução para encontrar uma execução específica.
  • A hora de início da execução (nas últimas 48 horas).
  • O status de execução .
  • O código de erro para execução com falha.

Os filtros aplicam-se ao gráfico, aos códigos de erro e à lista de execução.

Execução finalizada contagem gráfica

O gráfico Contagem de Execuções Concluídas mostra o número de execuções concluídas nas últimas 48 horas. Por default, o gráfico mostra as execuções que falharam, foram ignoradas e foram bem-sucedidas. Você também pode filtrar o gráfico para exibir status de execução específicos ou restringir o gráfico a um intervalo de tempo específico.

Trabalhos concluídos execução contagem gráfica.

nota

O gráfico de contagem de execuções concluídas aparece somente quando você filtra por trabalhos ou pipeline . Não é exibido quando a opção "Todas" está selecionada. O gráfico é mostrado aos administradores para toda a execução. Para usuários sem privilégios de administrador, é necessário clicar em "Executar como" e selecionar "Eu" .

Os filtros na parte superior da tab de execução se aplicam ao gráfico.

Para limitar o intervalo de tempo exibido no gráfico de contagem de execuções concluídas , defina um intervalo de tempo no filtro. Alternativamente, você pode clicar e arrastar o cursor no gráfico para selecionar o intervalo de tempo. O gráfico e a tabela de execução são atualizados para mostrar a execução apenas no intervalo de tempo definido.

A tabela "5 principais tipos de erro" mostra uma lista dos tipos de erro mais frequentes no intervalo de tempo selecionado, permitindo que você veja rapidamente as causas mais comuns de problemas em seu workspace.

lista de execução

A tab de execução também inclui uma tabela com a execução de trabalhos e pipeline dos últimos 60 dias. Databricks retém execução história por 60 dias para trabalho e pipeline. Por default, a tabela inclui detalhes sobre execuções com falha, ignoradas e bem-sucedidas.

lista de execução.

Os filtros na parte superior da tab de execução se aplicam à lista.

Em default, a lista de execução na tabela de execução exibe o seguinte:

  • A hora de começar para a execução.
  • O nome da tarefa ou pipeline associado à execução.
  • O tipo ( Job ou pipeline ) da execução.
  • O nome de usuário com o qual a execução é executada.
  • Como a execução foi iniciada ( lançada ), por um programa, uma solicitação API ou se foi iniciada manualmente.
  • O tempo decorrido para uma tarefa ou pipeline em execução ou o tempo total de execução de uma tarefa concluída. Um aviso é exibido se a duração exceder o tempo de conclusão esperado configurado.
  • O status da execução: Enfileirada , Pendente , Em execução , Ignorada , Bem-sucedida , Falha , Tempo limite , Cancelamento ou Cancelada .
  • Qualquer código de erro com o qual a execução foi encerrada.
  • Quaisquer parâmetros para a execução.
  • Para interromper uma tarefa ou pipeline em execução, clique no botão parar. Para acessar as ações da execução, clique em Ícone do menu Kebab. (por exemplo, para interromper uma execução em andamento ou excluir uma execução concluída).

Para alterar as colunas exibidas na lista de execução, clique em Ícone de colunas. e selecione ou desmarque as colunas.

Para view os detalhes da execução do trabalho, clique no link na coluna de horário de início da execução. Para view os detalhes da tarefa ou pipeline , clique no nome na coluna Job .

visualizar informações de linhagem para um emprego

Se Unity Catalog estiver habilitado em seu workspace, você poderá view as informações de linhagem de quaisquer tabelas Unity Catalog em seu fluxo de trabalho. Se as informações de linhagem estiverem disponíveis para o seu fluxo de trabalho, você verá um link com uma contagem de tabelas upstream e downstream no painel de detalhesJob para o seu trabalho, no painel de detalhes da execuçãoJob para uma execução do trabalho ou no painel de detalhes da tarefa para uma execução da tarefa. Clique no link para exibir a lista de tabelas. Clique em uma tabela para ver informações detalhadas no Explorador de Catálogo.

Visualização e execução de um Job criado com Declarative Automation Bundles.

Você pode usar a interface de usuário LakeFlow Jobs para view e executar Jobs implantados por Declarative Automation Bundles. Por default, esses trabalhos são somente leitura na interface de trabalho. Para editar um Job implantado por um pacote, altere o arquivo de configuração do pacote e reimplemente o Job. Aplicar alterações somente à configuração do pacote garante que os arquivos de origem do pacote sempre capturem a configuração atual do Job.

No entanto, se precisar fazer alterações imediatas em um Job, o senhor pode desconectar o Job da configuração do pacote para permitir a edição das configurações do Job na interface do usuário. Para desconectar o trabalho, clique em Disconnect from source (Desconectar da fonte ). Na caixa de diálogo Desconectar da fonte , clique em Desconectar para confirmar .

As alterações que o senhor fizer no Job na interface do usuário não serão aplicadas à configuração do pacote. Para aplicar as alterações feitas na interface do usuário ao pacote, você deve atualizar manualmente a configuração do pacote. Para reconectar o trabalho à configuração do pacote, reimplante o trabalho usando o pacote.

Exportar resultados da execução do trabalho

O senhor pode exportar os resultados da execução do Notebook e da execução do Job logs para todos os tipos de Job.

Exportar resultados da execução do Notebook

O senhor pode manter a execução do trabalho exportando seus resultados. Para a execução do Notebook Job, o senhor pode exportar um Notebook renderizado que pode ser importado posteriormente para o seu Databricks workspace.

Para exportar os resultados da execução do Notebook para um trabalho com uma única tarefa:

  1. Na página de detalhes do trabalho, clique no link Exibir detalhes da execução na coluna execução da tabela Execução concluída (últimos 60 dias) .
  2. Clique em Exportar para HTML .

Para exportar os resultados da execução do Notebook para um trabalho com várias tarefas:

  1. Na página de detalhes do trabalho, clique no link Exibir detalhes da execução na coluna execução da tabela Execução concluída (últimos 60 dias) .
  2. Clique na tarefa Notebook para exportar.
  3. Clique em Exportar para HTML .

Export Job execução logs

O senhor pode exportar o site logs para a execução do seu trabalho. O senhor pode configurar seu trabalho para entregar automaticamente logs para DBFS ou S3 ao configurar o trabalho compute (consulte a referência de configuração de computação) ou por meio do Job API. Veja o objeto new_cluster.cluster_log_conf no corpo da solicitação passado para as operações Create a new Job (POST /jobs/create) em Jobs API.