Limitações do conector Zip

info

Beta

Esse recurso está na versão Beta. Para usá-lo, o administrador do workspace deve ativar o Lakeflow Connect for Zip na página Pré-visualizações . Consulte Gerenciar prévias do Databricks.

Esta página contém informações sobre limitações conhecidas do conector Zip gerenciado no LakeFlow Connect.

Limitações gerais do conector de software como serviço (SaaS)

As limitações nesta seção aplicam-se a todos os conectores SaaS no LakeFlow Connect.

• Quando um pipeline agendado é executado, os alertas não são acionados imediatamente. Em vez disso, as execuções são acionadas quando a próxima atualização é executada.
• Quando uma tabela de origem é excluída, a tabela de destino não é excluída automaticamente. Você deve excluir a tabela de destino manualmente. Este comportamento não é consistente com o comportamento do Spark Declarative Pipelines no Lakeflow.
• Durante períodos de manutenção da fonte, o Databricks pode não conseguir acessar seus dados.
• Se o nome de uma tabela de origem entrar em conflito com o nome de uma tabela de destino existente, a atualização do pipeline falha.
• O suporte para pipeline multidestino é somente por API.
• Opcionalmente, é possível renomear uma tabela ingerida. Se você renomear uma tabela em seu pipeline, ele se torna um pipeline somente de API, e você não pode mais editar o pipeline na IU.
• Se uma coluna for selecionada depois que um pipeline já tiver começado, o conector não preenche automaticamente os dados para a nova coluna. Para ingerir dados históricos, execute manualmente um refresh completo na tabela.
• Databricks não pode ingerir duas ou mais tabelas com o mesmo nome no mesmo pipeline, mesmo que provenham de esquemas de origem diferentes.
• O sistema de origem assume que as colunas do cursor aumentam monotonicamente.
• O conector ingere dados brutos sem transformações. Use Spark Declarative Pipelines subsequentes em Lakeflow pipelines para transformações.

Limitações específicas do conector

As limitações nesta seção aplicam-se ao conector Zip.

• O conector ingere as tabelas event_logs, invoices, requests, purchase_orders e vendors incrementalmente. Ele refresh todas as outras tabelas completamente a cada atualização do pipeline.
• O conector ingere comments somente para solicitações de compras. O conector não ingere comentários em outros tipos de registro.
• O conector não ingere itens de fornecedor Zip, grupos de itens de fornecedor, produtos ou atributos.
• As tabelas amortization_schedules, change_orders, expense_categories e fx_rates incluem apenas os campos id e type.