Aller au contenu principal

Connecteur Anysphere Organization

info

Bêta

Cette fonctionnalité est en version bêta. Les administrateurs du Workspace peuvent contrôler l’accès à cette fonctionnalité depuis la page Previews en optant pour l’aperçu Lakeflow Connect for Anysphere Org . Consultez Gérer les aperçus Databricks.

Le connecteur géré Anysphere Organization dans Lakeflow Connect vous permet d’ingérer des données d’organisation et d’équipe provenant d’Anysphere (Cursor) dans Databricks.

Disponibilité des fonctionnalités​

Fonctionnalité

Disponibilité

Création de pipelines basée sur l’interface utilisateur

Icône de coche verte Supported

Création de pipeline par API

Icône de coche verte Supported

Declarative Automation Bundles

Icône de coche verte Supported

Ingestion incrémentielle

Icône Red X Non pris en charge

Toutes les tables sont actualisées avec un instantané complet lors de chaque mise à jour du pipeline. Chaque table conserve un historique quotidien via la colonne de partition snapshot_date.

Unity Catalog governance

Icône de coche verte Supported

Orchestration à l'aide de Databricks Workflows

Icône de coche verte Supported

SCD de type 2

Icône Red X Non pris en charge

Toutes les tables sont ingérées en tant qu’instantanés en refresh complet sans suivi des suppressions CDC, de sorte que le SCD de type 2 n’est pas disponible.

Sélection et désélection de colonnes basées sur l’API

Icône de coche verte Supported

Filtrage de lignes basé sur une API

Icône Red X Non pris en charge

Évolution des schémas automatisée : nouvelles colonnes et colonnes supprimées

Icône de coche verte Supported

Évolution des schémas automatisée : modifications des types de données

Icône Red X Non pris en charge

Évolution des schémas automatisée : renomages de colonnes

Icône Red X Non pris en charge

Nécessite un full refresh.

Évolution des schémas automatisée : nouvelles tables

Icône de coche verte Supported

Si vous ingérez le schéma entier.

Fonctionnalité

Disponibilité

Création de pipelines basée sur l’interface utilisateur

Icône de coche verte Supported

Création de pipeline par API

Icône de coche verte Supported

Declarative Automation Bundles

Icône de coche verte Supported

Ingestion incrémentielle

Icône Red X Non pris en charge

Toutes les tables sont actualisées avec un instantané complet lors de chaque mise à jour du pipeline. Chaque table conserve un historique quotidien via la colonne de partition snapshot_date.

Unity Catalog governance

Icône de coche verte Supported

Orchestration à l'aide de Databricks Workflows

Icône de coche verte Supported

SCD de type 2

Icône Red X Non pris en charge

Toutes les tables sont ingérées en tant qu’instantanés en refresh complet sans suivi des suppressions CDC, de sorte que le SCD de type 2 n’est pas disponible.

Sélection et désélection de colonnes basées sur l’API

Icône de coche verte Supported

Filtrage de lignes basé sur une API

Icône Red X Non pris en charge

Évolution des schémas automatisée : nouvelles colonnes et colonnes supprimées

Icône de coche verte Supported

Évolution des schémas automatisée : modifications des types de données

Icône Red X Non pris en charge

Évolution des schémas automatisée : renomages de colonnes

Icône Red X Non pris en charge

Nécessite un full refresh.

Évolution des schémas automatisée : nouvelles tables

Icône de coche verte Supported

Si vous ingérez le schéma entier.

Méthodes d’authentification​

Méthode d’authentification

Disponibilité

OAuth U2M

Icône Red X Non pris en charge

OAuth M2M

Icône Red X Non pris en charge

Basic authentication (username/password)

Icône Red X Non pris en charge

Basic authentication (API key)

Icône de coche verte Supported

Clé API administrateur de l’organisation Anysphere (Cursor).

Méthode d’authentification

Disponibilité

OAuth U2M

Icône Red X Non pris en charge

OAuth M2M

Icône Red X Non pris en charge

Basic authentication (username/password)

Icône Red X Non pris en charge

Basic authentication (API key)

Icône de coche verte Supported

Clé API administrateur de l’organisation Anysphere (Cursor).

Ingérer à partir de Anysphere Organization en 3 étapes​

Start ingesting from Anysphere Organization​

  1. Configurer l’organisation Anysphere pour l’ingestion (administrateurs) : configurez l’organisation Anysphere pour qu’elle s’authentifie auprès de Databricks.
  2. Créer une connexion Unity Catalog (Administrateurs) : créez une connexion dans Catalog Explorer pour permettre aux non-administrateurs de créer des pipelines.
  3. Créer un pipeline d’ingestion (Administrateurs ou non-administrateurs) : sélectionnez n’importe quelle interface prise en charge et créez un pipeline à partir d’une connexion existante.