Limitations du connecteur 1Password Event Logs

info

Bêta

Cette fonctionnalité est en version bêta. Pour l’utiliser, un administrateur du workspace doit activer Lakeflow Connect for 1Password Event Logs depuis la page Previews . Consultez Gérer les aperçus Databricks.

Le connecteur géré 1Password Event Logs ingère uniquement les tables Events API, s'authentifie à l'aide d'un jeton porteur et ne prend pas en charge le SCD de type 2.

Limitations générales des connecteurs SaaS (outil/solution/technologie/plateforme as a Service)

Les limitations de cette section s’appliquent à tous les connecteurs SaaS de Lakeflow Connect.

• Lorsque vous exécutez un pipeline planifié, les alertes ne se Trigger pas immédiatement. Elles activent plutôt le Trigger lors de l’exécution de la mise à jour suivante.
• Lorsqu’une table source est supprimée, la table de destination n’est pas automatiquement supprimée. Vous devez supprimer manuellement la table de destination. Ce comportement n’est pas cohérent avec le comportement de Spark Declarative Pipelines sur Lakeflow.
• Pendant les périodes de maintenance des sources, il est possible que Databricks ne puisse pas accéder à vos données.
• Si le nom d’une table source entre en conflit avec le nom d’une table de destination existante, la mise à jour du pipeline échoue.
• La prise en charge des pipelines multi-destination s'effectue uniquement via l'API.
• Vous pouvez éventuellement renommer une table que vous ingérez. Si vous renommez une table dans votre pipeline, celui-ci devient un pipeline accessible uniquement par l’API et vous ne pouvez plus le modifier dans l’interface utilisateur.
• If you select a column after a pipeline has already start, the connector does not automatically backfill data for the new column. To ingest historical data, manually run a full refresh on the table.
• Databricks ne peut pas ingérer deux tables ou plus portant le même nom dans le même pipeline, même si elles proviennent de schémas source différents.
• Le système source suppose que les colonnes de curseur augmentent de façon monotone.
• Le connecteur ingère les données brutes sans transformations. Utilisez des Spark Declarative Pipelines en aval sur les LakeFlow Pipelines pour les Transformations.

Limitations spécifiques au connecteur

Les limitations de cette section s'appliquent au connecteur 1Password Event Logs.

• Le connecteur ingère uniquement audit_events, item_usages et sign_in_attempts. Il n’ingère pas les autres APIs 1Password ni le contenu des éléments du coffre-fort.
• L'authentification utilise un jeton porteur de rapports d'événements à durée de vie prolongée. Le connecteur ne refresh pas le jeton. Si vous révoquez ou faites pivoter le jeton, mettez à jour la connexion Unity Catalog.
• Les hôtes d’API d’événements autorisés correspondent à *.1password.com, *.1password.ca et *.1password.eu.
• Le SCD de type 2 n'est pas pris en charge.