Limitations du connecteur de Logs d’audit unifiés Microsoft 365

info

Bêta

Cette fonctionnalité est en version bêta. Pour l’utiliser, un administrateur du workspace doit activer Lakeflow Connect for Microsoft 365 Unified Audit Logs depuis la page Previews . Consultez Gérer les aperçus Databricks.

Le connecteur géré Microsoft 365 Unified Audit Logs peut demander le contenu créé au cours des sept derniers jours. Exécutez l'ingestion plus fréquemment que tous les sept jours pour éviter les lacunes.

Limitations générales des connecteurs SaaS (outil/solution/technologie/plateforme as a Service)

Les limitations de cette section s'appliquent à tous les connecteurs SaaS de Lakeflow Connect.

• Lorsque vous exécutez un pipeline planifié, les alertes ne se trigger pas immédiatement. Elles activent plutôt le Trigger lors de l’exécution de la mise à jour suivante.
• Lorsqu’une table source est supprimée, la table de destination n’est pas automatiquement supprimée. Vous devez supprimer manuellement la table de destination. Ce comportement n’est pas cohérent avec le comportement de Spark Declarative Pipelines sur Lakeflow.
• Pendant les périodes de maintenance de la source, Databricks peut ne pas être en mesure d’accéder à vos données.
• Si le nom d’une table source est en conflit avec le nom d’une table de destination existante, la mise à jour du pipeline échoue.
• La prise en charge des pipelines multi-destinations est réservée aux API.
• Vous pouvez éventuellement renommer une table que vous ingérez. Si vous renommez une table de votre pipeline, celui-ci devient un pipeline basé uniquement sur l’API, et vous ne pouvez plus le modifier dans l’interface utilisateur.
• Si vous sélectionnez une colonne après qu’un pipeline a déjà start, le connecteur ne rétro-renseigne pas automatiquement les données de la nouvelle colonne. Pour ingérer des données historiques, exécutez manuellement un refresh complet sur la table.
• Databricks ne peut pas ingérer deux tables ou plus portant le même nom dans le même pipeline, même si elles proviennent de schémas source différents.
• Le système source suppose que les colonnes de curseur augmentent de façon monotone.
• Le connecteur ingère des données brutes sans transformations. Utilisez des Spark Declarative Pipelines en aval sur des Lakeflow pipelines pour les transformations.

Limitations spécifiques au connecteur

Les limitations suivantes s'appliquent au connecteur Microsoft 365 Unified Audit Logs :

• La première mise à jour du pipeline peut ingérer du contenu provenant au maximum des sept derniers jours. Si un pipeline ne s'exécute pas pendant plus de sept jours, la mise à jour suivante reprend à partir de sept jours avant l'heure actuelle.
• Exécutez chaque pipeline plus fréquemment que tous les sept jours. Microsoft ne rend pas disponible l'ancien contenu de l'API Management Activity via le connecteur.
• Microsoft 365 rend le contenu d’audit disponible uniquement après le start de son abonnement Management Activity API correspondant. Le contenu datant d’avant le start de l’abonnement peut ne pas être disponible.
• Les premiers blobs de contenu peuvent prendre jusqu’à 12 heures pour apparaître après le start d’un abonnement.
• Ne suspendez pas et ne désactivez pas un abonnement à l'API Management Activity pendant l'ingestion de sa table source.
• Le SCD de type 2 n'est pas pris en charge, car les événements d'audit unifiés sont en mode Ajout uniquement.
• Le filtrage des lignes n’est pas pris en charge.