Aller au contenu principal

Limitations du connecteur Atlassian Audit Logs

info

Bêta

This feature is in Beta. To use it, a workspace admin must turn on Lakeflow Connect for Atlassian Audit Logs from the Previews page. See Manage Databricks previews.

Le connecteur géré Atlassian Audit Logs ingère uniquement la table audit_logs, et Atlassian conserve les événements des Audit Logs jusqu'à 180 jours, ce qui limite la période sur laquelle le connecteur peut effectuer un remplissage (backfill).

Limitations générales des connecteurs SaaS (outil/solution/technologie/plateforme as a Service)​

Les limitations de cette section s'appliquent à tous les connecteurs SaaS de Lakeflow Connect.

  • Lorsque vous exécutez un pipeline planifié, les alertes ne se Trigger pas immédiatement. Elles activent plutôt le Trigger lors de l’exécution de la mise à jour suivante.
  • Lorsqu’une table source est supprimée, la table de destination n’est pas automatiquement supprimée. Vous devez supprimer manuellement la table de destination. Ce comportement ne correspond pas à celui de Spark Declarative Pipelines sur Lakeflow.
  • Pendant les périodes de maintenance des sources, Databricks peut ne pas être en mesure d’accéder à vos données.
  • Si le nom d'une table source est en conflit avec le nom d'une table de destination existante, la mise à jour du pipeline échoue.
  • La prise en charge des pipelines à destinations multiples est exclusivement assurée par l’API.
  • Vous pouvez facultativement renommer une table que vous ingérez. Si vous renommez une table dans votre pipeline, celui-ci devient un pipeline réservé à l’API et vous ne pouvez plus le modifier dans l’interface utilisateur.
  • Si vous sélectionnez une colonne après qu’un pipeline a déjà start, le connecteur ne remplit pas automatiquement les données de la nouvelle colonne. Pour ingérer des données historiques, exécutez manuellement un refresh complet sur la table.
  • Databricks ne peut pas ingérer deux tables ou plus portant le même nom dans le même pipeline, même si elles proviennent de schémas sources différents.
  • Le système source suppose que les colonnes de curseur augmentent de façon monotone.
  • Le connecteur ingère les données brutes sans transformations. Utilisez des Spark Declarative Pipelines en aval sur des Lakeflow pipelines pour les Transformations.

Limitations spécifiques au connecteur​

Les limitations de cette section s'appliquent au connecteur Atlassian Audit Logs.

  • Le connecteur ingère une seule table, audit_logs. Il n’ingère pas d’autres ressources de l’API Atlassian Admin telles que les utilisateurs, les groupes, les domaines ou les politiques.
  • Atlassian conserve les événements des Logs d’audit de l’organisation pendant un maximum de 180 jours. Le connecteur ne peut pas ingérer d’événements antérieurs à cette fenêtre de rétention.