Limitações do conector Microsoft 365 Unified Audit Logs

info

Beta

Este recurso está em Beta. To use it, a workspace admin must turn on Lakeflow Connect for Microsoft 365 Unified Audit Logs from the Previews page. See Gerenciar Databricks previews.

The managed Microsoft 365 Unified Audit Logs connector can request content created during the previous seven days. Run ingestion more frequently than every seven days to avoid gaps.

Limitações gerais do conector de software como serviço (SaaS)

As limitações nesta seção aplicam-se a todos os conectores de SaaS no Lakeflow Connect.

• Quando você executa um pipeline agendado, os alertas não Trigger imediatamente. Em vez disso, eles fazem Trigger quando ocorre a execução da próxima atualização.
• When a source table is deleted, the destination table is not automatically deleted. Você deve excluir a tabela de destino manualmente. Esse comportamento não é consistente com o comportamento do Spark Declarative Pipelines no Lakeflow.
• Durante os períodos de manutenção da origem, o Databricks pode não conseguir acessar seus dados.
• Se o nome de uma tabela de origem entrar em conflito com o nome de uma tabela de destino existente, a atualização do pipeline falhará.
• O suporte a pipelines de vários destinos é exclusivo para API.
• You can optionally rename a table that you ingest. If you rename a table in your pipeline, it becomes an API-only pipeline, and you can no longer edit the pipeline in the UI.
• Se você selecionar uma coluna depois que um pipeline já tiver começado, o conector não preencherá automaticamente os dados para a nova coluna. Para ingerir data histórica, execute manualmente um refresh completo na tabela.
• O Databricks não pode ingerir duas ou mais tabelas com o mesmo nome no mesmo pipeline, mesmo que venham de esquemas de origem diferentes.
• O sistema de origem assume que as colunas de cursor aumentam de forma monotônica.
• O conector ingere dados brutos sem transformações. Use Spark Declarative Pipelines downstream em LakeFlow Pipelines para transformações.

Limitações específicas do conector

As seguintes limitações aplicam-se ao conector Microsoft 365 Unified Audit Logs:

• A primeira atualização do pipeline pode ingerir conteúdo de no máximo sete dias anteriores. Se um pipeline não for executado por mais de sete dias, a próxima atualização será retomada a partir de sete dias antes do horário atual.
• Run each pipeline more frequently than every seven days. Microsoft does not make older Management Activity API content available through the connector.
• O Microsoft 365 disponibiliza o conteúdo de auditoria somente após o início da assinatura da API de atividade de gerenciamento correspondente. O conteúdo anterior ao início da assinatura pode não estar disponível.
• Os primeiros blobs de conteúdo podem levar até 12 horas para aparecer após o início de uma inscrição.
• Não pare ou desative uma inscrição na API de Atividade de Gerenciamento enquanto sua tabela de origem estiver sendo ingerida.
• O SCD Tipo 2 não é compatível porque os eventos de auditoria unificados são apenas de adição.
• Não há suporte para filtragem de linhas.