Connecteur Celigo

info

Beta

Cette fonctionnalité est en version bêta. Les administrateurs du workspace peuvent contrôler l'accès à cette fonctionnalité depuis la page Aperçus . Consultez Gérer les aperçus Databricks.

Pour utiliser le connecteur Celigo, un administrateur du workspace doit activer l'aperçu Lakeflow Connect - Celigo sur la page Previews .

Le connecteur Celigo managé dans Lakeflow Connect ingère les événements de log d'audit, tels que les opérations de création, de mise à jour et de suppression de Ressources, de Celigo vers Databricks.

Disponibilité des fonctionnalités

Fonctionnalité	Disponibilité
Création de pipelines basée sur l’interface utilisateur	Pris en charge
Création de pipelines basée sur l’API	Pris en charge
Declarative Automation Bundles	Pris en charge
Ingestion incrémentielle	Pris en charge
Gouvernance Unity Catalog	Pris en charge
Orchestration à l'aide de Databricks Workflows	Pris en charge
Sélection et désélection de colonnes basées sur l’API	Pris en charge
Filtrage de lignes basé sur l’API	Non pris en charge
SCD de type 2	Pris en charge La table audit_logs enregistre des événements immuables (ajout uniquement).
Évolution des schémas automatisée : nouvelles colonnes et colonnes supprimées	Pris en charge
Évolution automatisée des schémas : modifications des types de données	Non pris en charge
Évolution des schémas automatisée : renommages de colonnes	Non pris en charge Nécessite un refresh complet.

Fonctionnalité	Disponibilité
Création de pipelines basée sur l’interface utilisateur	Pris en charge
Création de pipelines basée sur l’API	Pris en charge
Declarative Automation Bundles	Pris en charge
Ingestion incrémentielle	Pris en charge
Gouvernance Unity Catalog	Pris en charge
Orchestration à l'aide de Databricks Workflows	Pris en charge
Sélection et désélection de colonnes basées sur l’API	Pris en charge
Filtrage de lignes basé sur l’API	Non pris en charge
SCD de type 2	Pris en charge La table audit_logs enregistre des événements immuables (ajout uniquement).
Évolution des schémas automatisée : nouvelles colonnes et colonnes supprimées	Pris en charge
Évolution automatisée des schémas : modifications des types de données	Non pris en charge
Évolution des schémas automatisée : renommages de colonnes	Non pris en charge Nécessite un refresh complet.

Méthodes d’authentification

Méthode d’authentification	Disponibilité
OAuth U2M	Non pris en charge
OAuth M2M	Non pris en charge
Authentification de base (nom d’utilisateur / mot de passe)	Non pris en charge
Authentification de base (clé API)	Pris en charge Jeton d'API d'accès complet Celigo integrator.io.

Méthode d’authentification	Disponibilité
OAuth U2M	Non pris en charge
OAuth M2M	Non pris en charge
Authentification de base (nom d’utilisateur / mot de passe)	Non pris en charge
Authentification de base (clé API)	Pris en charge Jeton d'API d'accès complet Celigo integrator.io.

Ingérer à partir de Celigo en trois étapes

remarque

Avant de commencer, veuillez consulter les sections Personae d’utilisateur Databricks, Interfaces prises en charge, Fréquence d’ingestion et Modèles courants.

1. Configurer Celigo pour l’ingestion (administrateurs) — Configurer Celigo pour s’authentifier auprès de Databricks.
2. Créer une connexion Unity Catalog (Administrateurs) — Créez une connexion dans l'Explorateur de catalogues pour stocker les identifiants permettant à Databricks de s'authentifier auprès de Celigo.
3. Créer un pipeline d’ingestion (administrateurs ou non-administrateurs) — Sélectionnez une interface prise en charge et créez un pipeline à partir d’une connexion existante.