Aller au contenu principal
Dernière mise à jour le

Limitations des connecteurs pour les logs système d’Okta

info

Bêta

Cette fonctionnalité est en version Bêta. To use it, a workspace admin must turn on Lakeflow Connect for Okta System Logs from the Previews page. See Manage Databricks previews.

Le connecteur géré Okta System Logs n’ingère que la table system_logs. Okta conserve les données des logs système pendant 90 jours, ce qui limite l’antériorité des événements que le connecteur peut ingérer.

Limitations générales des connecteurs SaaS (outil/solution/technologie/plateforme as a Service)​

Les limitations de cette section s’appliquent à tous les connecteurs SaaS de Lakeflow Connect.

  • Lorsque vous exécutez un pipeline planifié, les alertes ne se Trigger pas immédiatement. Elles se Trigger lors de l’exécution de la mise à jour suivante.
  • When a source table is deleted, the destination table is not automatically deleted. You must delete the destination table manually. This behavior is not consistent with Spark Declarative Pipelines on Lakeflow behavior.
  • Pendant les périodes de maintenance de la source, Databricks ne pourra peut-être pas accéder à vos données.
  • Si le nom d'une table source entre en conflit avec le nom d'une table de destination existante, la mise à jour du pipeline échoue.
  • La prise en charge des pipelines multi-destination est exclusivement assurée par l'API.
  • Vous pouvez éventuellement renommér une table que vous ingérez. Si vous renommez une table dans votre pipeline, il devient un pipeline exclusif à l’API et vous ne pouvez plus le modifier dans l’interface utilisateur.
  • Si vous sélectionnez une colonne après qu’un pipeline a déjà start, le connecteur ne remplit pas automatiquement les données pour la nouvelle colonne. Pour ingérer des données historiques, exécutez manuellement un refresh complet de la table.
  • Databricks ne peut pas ingérer deux tables ou plus portant le même nom dans le même pipeline, même si elles proviennent de schémas source différents.
  • Le système source part du principe que les colonnes du curseur augmentent de façon monotone.
  • Le connecteur ingère des données brutes sans Transformations. Utilisez des Spark Declarative Pipelines en aval sur les LakeFlow Pipelines pour les Transformations.

Limitations spécifiques au connecteur​

Les limitations suivantes s’appliquent au connecteur Okta System Logs :

  • Le connecteur n’ingère que la table system_logs. Il n’ingère pas d’autres ressources de l’API Okta, telles que les utilisateurs, les groupes, les applications ou les politiques.
  • Okta renvoie uniquement les données du journal système (System Log) des 90 derniers jours. Le connecteur ne peut pas ingérer d'événements plus anciens que cette période de conservation.
  • Le connecteur prend uniquement en charge l’authentification par jeton d’API SSWS.
  • Le type SCD 2 n’est pas pris en charge, car les événements System Log ne peuvent être qu’ajoutés.
  • Le filtrage des lignes n’est pas pris en charge.
Sur cette page