Aller au contenu principal

Connecteur NetSuite

info

Aperçu

Cette fonctionnalité est en aperçu public.

Le connecteur NetSuite géré dans Lakeflow Connect vous permet d’ingérer des données de NetSuite vers Databricks.

Disponibilité des fonctionnalités

Fonctionnalité

Disponibilité

Conception de pipelines via l'interface utilisateur

Icône de coche verte Pris en charge

Création de pipeline par API

Icône de coche verte Pris en charge

Declarative Automation Bundles

Icône de coche verte Pris en charge

Ingestion incrémentielle

Icône de coche verte Pris en charge

Gouvernance Unity Catalog

Icône de coche verte Pris en charge

Orchestration à l'aide de Databricks Workflows

Icône de coche verte Pris en charge

SCD de type 2

Icône de coche verte Pris en charge

Sélection et désélection de colonnes via API

Icône de coche verte Pris en charge

Filtrage des lignes basé sur l'API

Icône X rouge Non pris en charge

Évolution automatique des schémas : Nouvelles colonnes et colonnes supprimées

Icône de coche verte Pris en charge

Évolution automatisée des schémas : changements de type de données

Icône X rouge Non pris en charge

évolution des schémas automatisée : Renommage de colonnes

Icône de coche verte Pris en charge

Considéré comme une nouvelle colonne (nouveau nom) et une colonne supprimée (ancien nom).

Évolution des schémas automatisée : nouvelles tables

Icône de coche verte Pris en charge

Si vous ingérez l’intégralité du schéma. Consulter les limites sur le nombre de tables par pipeline.

Nombre maximal de tables par pipeline

200

Fonctionnalité

Disponibilité

Conception de pipelines via l'interface utilisateur

Icône de coche verte Pris en charge

Création de pipeline par API

Icône de coche verte Pris en charge

Declarative Automation Bundles

Icône de coche verte Pris en charge

Ingestion incrémentielle

Icône de coche verte Pris en charge

Gouvernance Unity Catalog

Icône de coche verte Pris en charge

Orchestration à l'aide de Databricks Workflows

Icône de coche verte Pris en charge

SCD de type 2

Icône de coche verte Pris en charge

Sélection et désélection de colonnes via API

Icône de coche verte Pris en charge

Filtrage des lignes basé sur l'API

Icône X rouge Non pris en charge

Évolution automatique des schémas : Nouvelles colonnes et colonnes supprimées

Icône de coche verte Pris en charge

Évolution automatisée des schémas : changements de type de données

Icône X rouge Non pris en charge

évolution des schémas automatisée : Renommage de colonnes

Icône de coche verte Pris en charge

Considéré comme une nouvelle colonne (nouveau nom) et une colonne supprimée (ancien nom).

Évolution des schémas automatisée : nouvelles tables

Icône de coche verte Pris en charge

Si vous ingérez l’intégralité du schéma. Consulter les limites sur le nombre de tables par pipeline.

Nombre maximal de tables par pipeline

200

Méthodes d'authentification

Méthode d'authentification

Disponibilité

OAuth U2M

Icône X rouge Non pris en charge

OAuth M2M

Icône X rouge Non pris en charge

OAuth (jeton de refresh manuel)

Icône X rouge Non pris en charge

Authentification de base (nom d’utilisateur/mot de passe)

Icône X rouge Non pris en charge

Authentification de base (clé API)

Icône X rouge Non pris en charge

Authentification de base (clé JSON du compte de service)

Icône de coche verte Pris en charge

Méthode d'authentification

Disponibilité

OAuth U2M

Icône X rouge Non pris en charge

OAuth M2M

Icône X rouge Non pris en charge

OAuth (jeton de refresh manuel)

Icône X rouge Non pris en charge

Authentification de base (nom d’utilisateur/mot de passe)

Icône X rouge Non pris en charge

Authentification de base (clé API)

Icône X rouge Non pris en charge

Authentification de base (clé JSON du compte de service)

Icône de coche verte Pris en charge

Ce qu'il faut savoir avant de start

Sujet

Pourquoi c'est important

Profil d'utilisateur Databricks

Le workflow dépend de votre persona utilisateur Databricks :

  • Mono-utilisateur : un utilisateur administrateur crée une connexion Unity Catalog et un pipeline d'ingestion.
  • Multi-utilisateur : un utilisateur administrateur crée une connexion pour les utilisateurs non-administrateurs afin qu’ils puissent créer des pipelines.

Méthode d'authentification

Les étapes de création d’une connexion dépendent de la méthode d’authentification que vous choisissez.

Interface

Les étapes de création d'un pipeline dépendent de l'interface.

Fréquence d'ingestion

La planification du pipeline dépend de vos exigences en matière de latence et de coût.

Modèles courants

Selon vos besoins d'ingestion, le pipeline peut utiliser des configurations comme le suivi de l'historique, la sélection de colonnes et le filtrage de lignes. Les configurations prises en charge varient selon le connecteur. Voir Disponibilité des fonctionnalités.

Sujet

Pourquoi c'est important

Profil d'utilisateur Databricks

Le workflow dépend de votre persona utilisateur Databricks :

  • Mono-utilisateur : un utilisateur administrateur crée une connexion Unity Catalog et un pipeline d'ingestion.
  • Multi-utilisateur : un utilisateur administrateur crée une connexion pour les utilisateurs non-administrateurs afin qu’ils puissent créer des pipelines.

Méthode d'authentification

Les étapes de création d’une connexion dépendent de la méthode d’authentification que vous choisissez.

Interface

Les étapes de création d'un pipeline dépendent de l'interface.

Fréquence d'ingestion

La planification du pipeline dépend de vos exigences en matière de latence et de coût.

Modèles courants

Selon vos besoins d'ingestion, le pipeline peut utiliser des configurations comme le suivi de l'historique, la sélection de colonnes et le filtrage de lignes. Les configurations prises en charge varient selon le connecteur. Voir Disponibilité des fonctionnalités.

start l'ingestion depuis NetSuite

Le tableau suivant présente un aperçu du flux d'ingestion NetSuite de bout en bout, selon le type d'utilisateur :

Utilisateur

Étapes

Admin

  1. Configurez NetSuite pour activer l'authentification depuis Databricks. Voir Configurer NetSuite pour l'ingestion dans Databricks.
  2. Soit :
    • Utilisez Catalog Explorer pour créer une connexion à NetSuite afin que les non-administrateurs puissent créer des pipelines. Consultez Créer une connexion NetSuite.
    • Utilisez l'interface utilisateur d'ingestion de données pour créer une connexion et un pipeline en même temps. Consultez Ingérer des données depuis NetSuite.

Non-administrateur

Utilisez toute interface prise en charge pour créer un pipeline à partir d'une connexion existante. Consultez Ingérer des données depuis NetSuite.

Utilisateur

Étapes

Admin

  1. Configurez NetSuite pour activer l'authentification depuis Databricks. Voir Configurer NetSuite pour l'ingestion dans Databricks.
  2. Soit :
    • Utilisez Catalog Explorer pour créer une connexion à NetSuite afin que les non-administrateurs puissent créer des pipelines. Consultez Créer une connexion NetSuite.
    • Utilisez l'interface utilisateur d'ingestion de données pour créer une connexion et un pipeline en même temps. Consultez Ingérer des données depuis NetSuite.

Non-administrateur

Utilisez toute interface prise en charge pour créer un pipeline à partir d'une connexion existante. Consultez Ingérer des données depuis NetSuite.