Lakeflow 宣言型パイプラインのクエリ履歴にアクセスする
この記事では、Lakeflow宣言型パイプラインの実行に関連付けられているクエリ履歴とクエリ プロファイルにアクセスする方法について説明しま 。 この情報を使用して、クエリのデバッグ、パフォーマンスのボトルネックの特定、パイプラインの実行の最適化を行うことができます。
パイプラインの更新のクエリ履歴を確認する
トリガーと連続の両方のすべての ETL パイプラインについて、マテリアライズドビューとストリーミングテーブルが更新されると、クエリステートメントが クエリ履歴 に表示されます。 ターゲットテーブルを更新するフロー実行ごとに 1 つの REFRESH ステートメントがあります。クエリ履歴ページで コンピュート フィルターを使用すると、宣言型パイプライン コンピュートを使用して処理されたクエリのみ LakeFlow 表示できます。 クエリ履歴 UI の詳細については、「 クエリ履歴」 を参照してください。
クエリの詳細にアクセスするには、次の手順を実行します。
-
サイドバー
クエリー履歴 をクリックします。 -
パイプラインのみを表示するには 、コンピュート ドロップ ダウン フィルターからLakeFlow宣言型パイプライン オプションを選択します。
クエリまたは更新のユーザー、時間、ステータス、その他の機能でフィルタリングすることもできます。
-
クエリ ステートメントをクリックすると、クエリの期間や集計されたメトリクスなどの概要の詳細が表示されます。 「クエリの詳細を表示」を参照してください。
-
[ クエリ プロファイルを表示 ] をクリックして、クエリ プロファイルを開きます。クエリプロファイルの詳細については、「 クエリプロファイル」 を参照してください。クエリ プロファイルは、パイプラインの実行中または実行の完了後に開くことができます。
-
必要に応じて、 「クエリ ソース」 セクションのリンクを使用して、関連するパイプライン モニタリング ページを開きます。
パイプラインモニタリングページからクエリ履歴にアクセス
パイプライン モニタリング ページから、画面の下部近くにある [パフォーマンス ] タブをクリックして、パイプラインの履歴にアクセスします。 パイプラインの実行中または実行の完了後にステートメントをクリックすると、クエリの詳細パネルとプロファイルを表示できます。
LakeFlow Pipelinesエディターからクエリ履歴にアクセスする
パイプラインを編集しているときに、下部のペインの [パフォーマンス] タブからクエリ履歴にアクセスできます。最初にテーブルを選択すると、クエリ履歴の範囲はそのテーブルに限定されます。
リスト内の各項目は、コードで定義されたフローの実行に対応します。複数のフローが同じテーブルに書き込まない限り、テーブルごとに 1 つのステートメントが存在します。
- このリストをデータセット名でフィルタリングして、そのテーブルに書き込むフローのステートメントを見つけることができます。
- このリストには最大 1,000 件のステートメントが表示されます。パイプラインにさらに多くのステートメントがある場合は、[ クエリ履歴をすべて表示] をクリックすると、最新のパイプライン実行 ID でフィルターされたステートメントの完全なリストが [クエリ履歴] ページに表示されます。
- 大丈夫では、読み取りと書き込みの期間とメトリクスを確認できます。 リスト内のREFRESHステートメントをクリックすると、フローの詳細なメトリックとクエリ プロファイルを表示できます。
- メトリクスとクエリ プロファイルは、パイプラインの実行中または実行完了後の両方で使用できます。
このビューで利用できる詳細情報については、 「クエリの詳細の表示」を参照してください。
制限
- プロビジョニング時間とキューイング時間は使用できません。