Limitações do conector de logs de auditoria do Box
info
Beta
Esse recurso está em Beta. Para usá-lo, um administrador do workspace deve ativar o Lakeflow Connect para Box Audit Logs na página Pré-visualizações . Consulte Gerenciar prévias do Databricks.
O conector gerenciado de Logs de Auditoria do Box ingere apenas a tabela event_logs.
Limitações gerais de software como serviço (SaaS) do conector
As limitações nesta seção se aplicam a todos os conectores SaaS no Lakeflow Connect.
- Quando você executa um pipeline agendado, os alertas não Trigger imediatamente. Em vez disso, eles fazem Trigger quando ocorre a execução da próxima atualização.
- Quando uma tabela de origem é excluída, a tabela de destino não é excluída automaticamente. Você deve excluir a tabela de destino manualmente. Esse comportamento não é consistente com o comportamento de Spark Declarative Pipelines no Lakeflow.
- Durante os períodos de manutenção da fonte, o Databricks pode não conseguir acessar seus dados.
- Se o nome de uma tabela de origem entrar em conflito com o nome de uma tabela de destino existente, a atualização do pipeline falhará.
- O suporte para pipeline de destino múltiplo é apenas para API.
- Opcionalmente, você pode renomear uma tabela que você ingere. Se você renomear uma tabela em seu pipeline, ela se tornará um pipeline somente de API e você não poderá mais editar o pipeline na UI.
- Se você selecionar uma coluna depois que um pipeline já tiver começado, o conector não fará o preenchimento automático de dados para a nova coluna. Para ingerir data histórica, faça manualmente uma execução de refresh completo da tabela.
- O Databricks não consegue ingerir duas ou mais tabelas com o mesmo nome no mesmo pipeline, mesmo que venham de esquemas de origem diferentes.
- O sistema de origem assume que as colunas de cursor aumentam de forma monotônica.
- O conector ingere dados brutos sem transformações. Use Spark Declarative Pipelines downstream em LakeFlow Pipelines para transformações.
Limitações específicas do conector
As limitações nesta seção se aplicam ao conector de Logs de Auditoria do Box.
- O conector ingere uma única tabela,
event_logs. Ele não ingere outros recursos da API Box, como arquivos, usuários ou pastas. - O Box retém eventos corporativos por 14 dias quando o tipo de transmissão é
admin_logs_streaming. O conector não pode ingerir eventos anteriores a esta janela de retenção. Consulte Obter eventos corporativos.