Limitações do conector Anaplan

info

Beta

Esse recurso está em Beta. Os administradores do workspace podem controlar o acesso a esse recurso na página Previews . Consulte Gerenciar Databricks previews.

Esta página contém informação sobre limitações conhecidas do conector do Anaplan gerenciado no Lakeflow Connect.

General limitations of software as a service (SaaS) connectors

As limitações nesta seção aplicam-se a todos os conectores de SaaS no Lakeflow Connect.

• Quando você executa um pipeline agendado, os alertas não Trigger imediatamente. Em vez disso, eles fazem Trigger quando ocorre a execução da próxima atualização.
• Quando uma tabela de origem é excluída, a tabela de destino não é excluída automaticamente. Você deve excluir manualmente a tabela de destino. Esse comportamento não é consistente com o comportamento do Spark Declarative Pipelines no Lakeflow.
• Durante períodos de manutenção da fonte, talvez o Databricks não consiga acessar seus dados.
• Se o nome de uma tabela de origem entrar em conflito com o nome de uma tabela de destino existente, a atualização do pipeline falhará.
• O suporte a pipeline de destino múltiplo é exclusivo para API.
• Opcionalmente, você pode renomear uma tabela que você ingere. Se você renomear uma tabela no seu pipeline, ele se tornará um pipeline baseado apenas em API e você não poderá mais editar o pipeline na IU.
• Se você selecionar uma coluna depois que um pipeline já tiver começado, o conector não preencherá automaticamente os dados da nova coluna. Para ingerir data histórica, execute manualmente um refresh completo na tabela.
• O Databricks não pode ingerir duas ou mais tabelas com o mesmo nome no mesmo pipeline, mesmo que venham de esquemas de origem diferentes.
• O sistema de origem assume que as colunas de cursor aumentam monótonamente.
• O conector ingere dados brutos sem transformações. Use Spark Declarative Pipelines downstream em LakeFlow Pipelines para transformações.

Limitações específicas do conector

As limitações desta seção aplicam-se ao conector do Anaplan.

• O conector dá suporte à ingestão incremental apenas para a tabela audit_events. O conector atualiza a tabela users com um Snapshot completo a cada atualização do pipeline.
• A tabela audit_events armazena seu campo additionalAttributes como uma coluna VARIANT, portanto, esta tabela não oferece suporte ao SCD tipo 2.
• Para ver a lista de tabelas suportadas, consulte Tabelas de origem suportadas.