Limitations du connecteur Celigo

info

Bêta

This feature is in Beta. Workspace admins can control access to this feature from the Previews page. See Manage Databricks previews.

Cette page contient des informations sur les limitations connues du connecteur Celigo géré dans Lakeflow Connect.

Limitations générales des connecteurs SaaS (outil/solution/technologie/plateforme as a Service)

Les limitations de cette section s’appliquent à tous les connecteurs SaaS de Lakeflow Connect.

• Lorsque vous exécutez un pipeline planifié, les alertes ne se trigger pas immédiatement. Elles se Trigger plutôt lors de la prochaine exécution de la mise à jour.
• Lorsqu’une table source est supprimée, la table de destination n’est pas automatiquement supprimée. Vous devez supprimer manuellement la table de destination. Ce comportement n’est pas cohérent avec le comportement de Spark Declarative Pipelines sur Lakeflow.
• Pendant les périodes de maintenance des sources, il est possible que Databricks ne puisse pas accéder à vos données.
• Si le nom d’une table source est en conflit avec le nom d’une table de destination existante, la mise à jour du pipeline échoue.
• La prise en charge des pipelines multi-destination est exclusivement disponible par API.
• Vous pouvez éventuellement renommer une table que vous ingérez. Si vous renommez une table dans votre pipeline, il devient un pipeline exclusif à l’API et vous ne pouvez plus le modifier dans l’interface utilisateur.
• Si vous sélectionnez une colonne après qu’un pipeline a déjà start, le connecteur ne remplit pas automatiquement les données de la nouvelle colonne. Pour ingérer des données historiques, exécutez manuellement un refresh complet sur la table.
• Databricks ne peut pas ingérer deux tables ou plus portant le même nom dans le même pipeline, même si elles proviennent de schémas source différents.
• The source system assumes that the cursor columns are monotonically increasing.
• Le connecteur ingère les données brutes sans transformations. Utilisez des Spark Declarative Pipelines en aval sur les LakeFlow Pipelines pour les Transformations.

Limitations spécifiques aux connecteurs

The limitations in this section apply to the Celigo connector.

• Le connecteur ingère la table audit_logs.
• Chaque connexion cible une région de données. Pour procéder à l’ingestion à partir des Endpoint globaux (us) et de l’UE (eu), créez une connexion distincte pour chaque région.