Limitations des Logs Microsoft Graphe du connecteur

info

Bêta

Cette fonctionnalité est en bêta. Pour l'utiliser, un administrateur de Workspace doit activer Lakeflow Connect for Microsoft Graphe Logs depuis la page Aperçus . Consultez Gérer les aperçus Databricks.

Cette page contient des informations sur les limites connues du connecteur managé Microsoft Graphe Logs dans Lakeflow Connect.

Limitations générales des connecteurs SaaS (outil/solution/technologie/plateforme as a Service)

Les limitations décrites dans cette section s’appliquent à tous les connecteurs SaaS dans Lakeflow Connect.

• Lorsque vous exécutez un pipeline planifié, les alertes ne sont pas Trigger immédiatement. En revanche, elles sont Trigger lors de l’exécution de la mise à jour suivante.
• Lorsqu’une table source est supprimée, la table de destination n’est pas supprimée automatiquement. Vous devez supprimer la table de destination manuellement. Ce comportement n’est pas cohérent avec le comportement de Spark Declarative Pipelines sur Lakeflow.
• Pendant les périodes de maintenance de la source, Databricks peut être dans l’impossibilité d’accéder à vos données.
• Si le nom d’une table source entre en conflit avec celui d’une table de destination existante, la mise à jour du pipeline échoue.
• La prise en charge du pipeline multi-destination est uniquement par API.
• Vous pouvez éventuellement renommer une table que vous ingérez. Si vous renommez une table dans votre pipeline, il devient un pipeline API uniquement et vous ne pourrez plus le modifier dans l’interface utilisateur.
• Si vous sélectionnez une colonne après le start d'un pipeline, le connecteur ne remplit pas automatiquement les données pour cette nouvelle colonne. Pour ingérer des données historiques, exécutez manuellement un refresh complet sur la table.
• Databricks ne peut pas ingérer deux tables ou plus portant le même nom dans le même pipeline, même si elles proviennent de schémas sources différents.
• Le système source suppose que les colonnes de curseur sont en augmentation monotone.
• Le connecteur ingère les données brutes sans transformation. Utilisez les pipelines Spark Declarative Pipelines en aval sur les LakeFlow Pipelines pour les Transformations.

Limitations spécifiques au connecteur

Les limitations de cette section s’appliquent au connecteur Microsoft Graphe Logs.

• Le connecteur ingère uniquement les alertes à partir de l’Endpoint Microsoft Graphe alerts_v2. Il n’ingère pas les incidents de sécurité ou les alertes à partir de l’ancien endpoint alerts.
• Le connecteur prend en charge le service global Microsoft, y compris le Government Communauté Cloud (GCC), ainsi que les clouds US Government GCC High et Department of Defense (DoD). Il ne prend pas en charge Microsoft Graphe exploité par 21Vianet en Chine.
• L’option start_datetime s’applique uniquement à la première synchronisation. Les synchronisations ultérieures reprennent à partir de la dernière valeur lastUpdateDateTime ingérée.