Limitações do conector do Google Workspace

info

Beta

Esse recurso está em Beta. Para usá-lo, o administrador do workspace deve ativar o Lakeflow Connect for Google Workspace na página Previews . Consulte Gerenciar prévias do Databricks.

O conector gerenciado do Google Workspace no Lakeflow Connect tem as seguintes limitações conhecidas.

Limitações gerais do conector de software como serviço (SaaS)

The limitations in this section apply to all SaaS connectors in Lakeflow Connect.

• Quando você executa um pipeline agendado, os alertas não Trigger imediatamente. Em vez disso, eles fazem Trigger quando ocorre a execução da próxima atualização.
• Quando uma tabela de origem é excluída, a tabela de destino não é excluída automaticamente. Você deve excluir a tabela de destino manualmente. Esse comportamento não é consistente com o comportamento do Spark Declarative Pipelines no Lakeflow.
• Durante os períodos de manutenção da fonte, o Databricks pode não conseguir acessar seus dados.
• Se o nome de uma tabela de origem entrar em conflito com o nome de uma tabela de destino existente, a atualização do pipeline falhará.
• O suporte a pipelines com vários destinos é exclusivo via API.
• Opcionalmente, você pode renomear uma tabela que ingerir. Se você renomear uma tabela em seu pipeline, ele se tornará um pipeline somente de API e você não poderá mais editá-lo na IU.
• Se você selecionar uma coluna depois que um pipeline já tiver começado, o conector não preencherá automaticamente os dados da nova coluna. Para ingerir data histórica, execute manualmente um refresh completo na tabela.
• O Databricks não pode ingerir duas ou mais tabelas com o mesmo nome no mesmo pipeline, mesmo que venham de diferentes esquemas de origem.
• The source system assumes that the cursor columns are monotonically increasing.
• O conector ingere dados brutos sem transformações. Use Spark Declarative Pipelines downstream em LakeFlow Pipelines para transformações.

Limitações específicas do conector

The limitations in this section apply to the Google Workspace connector.

• O conector ingere a atividade de auditoria da API Admin SDK Reports. Ele não ingere outros recursos da API do Google Workspace.
• O SCD Tipo 2 não é compatível. Os registros de atividades têm colunas VARIANT e os eventos de auditoria são somente de adição.
• O Google Workspace retém logs de atividades por até 180 dias. O conector não pode ingerir eventos anteriores a esta janela de retenção.
• Different Google Workspace applications report with different lag windows. Per-application lookback is applied to accommodate this lag. In particular, the takeout application's "process finished" event can lag by up to several days; very large exports finishing beyond the per-application lookback window may not be captured.
• Na primeira sincronização, o conector preenche retroativamente os 179 dias anteriores de atividade de auditoria.