Limitações do conector de logs do Microsoft Graph

info

Beta

Este recurso está em Beta. Para usá-lo, um administrador do Workspace deve ativar o Lakeflow Connect para Microsoft gráfico Logs na página Prévias . Consulte Gerenciar prévias do Databricks.

Esta página contém informações sobre as limitações conhecidas do conector gerenciado de Logs do Microsoft Graph no Lakeflow Connect.

Limitações gerais do conector de software como serviço (SaaS)

As limitações nesta seção se aplicam a todos os conectores SaaS no Lakeflow Connect.

• Quando você executa um pipeline agendado, os alertas não Trigger imediatamente. Em vez disso, eles fazem Trigger quando ocorre a execução da próxima atualização.
• Quando uma tabela de origem é excluída, a tabela de destino não é excluída automaticamente. Você deve excluir a tabela de destino manualmente. Este comportamento não é consistente com o comportamento dos Spark Declarative Pipelines no Lakeflow.
• Durante os períodos de manutenção da fonte, o Databricks poderá não conseguir acessar seus dados.
• Se um nome de tabela de origem entrar em conflito com um nome de tabela de destino existente, a atualização do pipeline falhará.
• O suporte para pipeline de múltiplos destinos é apenas para API.
• Opcionalmente, você pode renomear uma tabela que você ingere. Se você renomear uma tabela em seu pipeline, ele se tornará um pipeline somente de API e você não poderá mais editar o pipeline na interface do usuário.
• Se você selecionar uma coluna depois que um pipeline já tiver começado, o conector não fará o preenchimento retroativo automático de dados para a nova coluna. Para ingerir data histórica, execute manualmente um refresh completo na tabela.
• O Databricks não pode ingerir duas ou mais tabelas com o mesmo nome no mesmo pipeline, mesmo que venham de esquemas de origem diferentes.
• O sistema de origem assume que as colunas de cursor são monotonicamente crescentes.
• O conector ingere dados brutos sem transformações. Use Spark Declarative Pipelines downstream em LakeFlow Pipelines para transformações.

Limitações específicas do conector

As limitações nesta seção se aplicam ao conector de Microsoft gráfico Logs.

• O conector ingere alertas apenas do Endpoint alerts_v2 do Microsoft gráfico. Ele não ingere incidentes de segurança ou alertas do endpoint alerts legado.
• O conector oferece suporte ao serviço global da Microsoft, incluindo Government Comunidade Cloud (GCC) e as clouds GCC High e Department of Defense (DoD) do governo dos EUA. Ele não oferece suporte ao Microsoft Graph operado pela 21Vianet na China.
• A opção start_datetime aplica-se apenas à primeira sincronização. As sincronizações posteriores retomam a partir do último valor de lastUpdateDateTime ingerido.