Accéder à l'historique des query pour les pipelines

L'historique des queries et les profils de query pour les exécutions de pipeline vous aident à déboguer les queries, à identifier les goulots d'étranglement de performance et à optimiser les exécutions de pipeline. Ces informations sont disponibles sur la page d'historique des queries, la page de monitoring des pipelines et l'Éditeur de LakeFlow Pipelines.

Vérifier l’historique des query pour les mises à jour de pipeline

Pour tous les pipelines ETL, déclenchés et continus, une instruction de query apparaît dans l'historique des query lorsque les vues matérialisées et les tables de streaming sont mises à jour. Il existe une instruction REFRESH pour chaque exécution de flux qui met à jour une table cible. Vous pouvez utiliser le filtre Compute sur la page d'historique des requêtes pour afficher uniquement les requêtes traitées à l'aide de pipeline compute. Consultez l'historique des query pour en savoir plus sur l'interface utilisateur de l'historique des query.

Pour accéder aux détails de la query, suivez les étapes suivantes :

1. Cliquez sur Historique des queries dans la barre latérale.

2. Sélectionnez l'option Compute du pipeline dans le filtre déroulant Compute pour afficher uniquement les pipelines.

   Vous pouvez également filtrer par utilisateur, heure, statut et autres caractéristiques de la query ou de la mise à jour.

3. Cliquez sur une instruction de query pour afficher les détails récapitulatifs tels que la durée de la query et les métriques agrégées. Voir Afficher les détails de la query.

4. Cliquez sur Voir le profil de query pour ouvrir le profil de query. Voir Profil de query pour plus de détails sur le profil de query. Vous pouvez ouvrir le profil de query pendant que le pipeline est en cours d'exécution ou une fois l'exécution terminée.

5. Si vous le souhaitez, utilisez les liens de la section Source de la query pour ouvrir la page de monitoring du pipeline associée.

Accédez à l'historique des query depuis la page de monitoring du pipeline

Depuis la page de supervision des pipelines, cliquez sur la tab Performance en bas de l’écran pour accéder à l’historique de votre pipeline. Vous pouvez afficher le volet et le profil des détails de la query en cliquant sur une instruction pendant l’exécution du pipeline ou une fois l’exécution terminée.

Accédez à l'historique des query depuis l'Éditeur de LakeFlow Pipelines.

Lorsque vous modifiez un pipeline, vous pouvez accéder à l'historique des query depuis l'onglet **Performances** du volet inférieur. Si vous sélectionnez d'abord une table, l'historique des query est limité à cette table.

Chaque élément de la liste correspond à l'exécution d'un flux défini dans votre code. Il y a une instruction par table, sauf si plusieurs flux écrivent dans la même table.

• Vous pouvez filtrer cette liste par nom de dataset pour trouver les instructions des flux qui écrivent dans cette table.
• Cette liste affiche jusqu'à 1 000 instructions. Si votre pipeline comporte davantage de déclarations, vous pouvez cliquer sur **Tout afficher dans l'historique des query** pour consulter la liste complète des déclarations sur la page Historique des query, filtrée par le dernier ID d'exécution de pipeline.
• Par default, vous pouvez voir la durée et les métriques pour les lectures et les écritures. Vous pouvez cliquer sur une instruction REFRESH dans la liste pour afficher des métriques supplémentaires et le profil de query pour le flux.
• Les métriques et les profils de query sont disponibles pendant l'exécution du pipeline ou une fois l'exécution terminée.

Pour en savoir plus sur les détails disponibles dans cette vue, consultez Afficher les détails de la query.

Limitations

• Le provisionnement et le temps d’attente ne sont pas disponibles.