Limitations du connecteur Atlassian Audit Logs
info
Bêta
This feature is in Beta. To use it, a workspace admin must turn on Lakeflow Connect for Atlassian Audit Logs from the Previews page. See Manage Databricks previews.
Le connecteur géré Atlassian Audit Logs ingère uniquement la table audit_logs, et Atlassian conserve les événements des Audit Logs jusqu'à 180 jours, ce qui limite la période sur laquelle le connecteur peut effectuer un remplissage (backfill).
Limitations générales des connecteurs SaaS (outil/solution/technologie/plateforme as a Service)
Les limitations de cette section s'appliquent à tous les connecteurs SaaS de Lakeflow Connect.
- Lorsque vous exécutez un pipeline planifié, les alertes ne se Trigger pas immédiatement. Elles activent plutôt le Trigger lors de l’exécution de la mise à jour suivante.
- Lorsqu’une table source est supprimée, la table de destination n’est pas automatiquement supprimée. Vous devez supprimer manuellement la table de destination. Ce comportement ne correspond pas à celui de Spark Declarative Pipelines sur Lakeflow.
- Pendant les périodes de maintenance des sources, Databricks peut ne pas être en mesure d’accéder à vos données.
- Si le nom d'une table source est en conflit avec le nom d'une table de destination existante, la mise à jour du pipeline échoue.
- La prise en charge des pipelines à destinations multiples est exclusivement assurée par l’API.
- Vous pouvez facultativement renommer une table que vous ingérez. Si vous renommez une table dans votre pipeline, celui-ci devient un pipeline réservé à l’API et vous ne pouvez plus le modifier dans l’interface utilisateur.
- Si vous sélectionnez une colonne après qu’un pipeline a déjà start, le connecteur ne remplit pas automatiquement les données de la nouvelle colonne. Pour ingérer des données historiques, exécutez manuellement un refresh complet sur la table.
- Databricks ne peut pas ingérer deux tables ou plus portant le même nom dans le même pipeline, même si elles proviennent de schémas sources différents.
- Le système source suppose que les colonnes de curseur augmentent de façon monotone.
- Le connecteur ingère les données brutes sans transformations. Utilisez des Spark Declarative Pipelines en aval sur des Lakeflow pipelines pour les Transformations.
Limitations spécifiques au connecteur
Les limitations de cette section s'appliquent au connecteur Atlassian Audit Logs.
- Le connecteur ingère une seule table,
audit_logs. Il n’ingère pas d’autres ressources de l’API Atlassian Admin telles que les utilisateurs, les groupes, les domaines ou les politiques. - Atlassian conserve les événements des Logs d’audit de l’organisation pendant un maximum de 180 jours. Le connecteur ne peut pas ingérer d’événements antérieurs à cette fenêtre de rétention.