Databricksのコストの監視と管理
チームやワークスペース間で利用が増大する前に、アカウントが小さい間にコストモニタリングを設定します。Databricksは、アカウントの課金利用をシステムテーブルに記録します。使用状況ダッシュボード、カスタムタグ、予算を使用して、支出を追跡し、それを発生させるチームやプロジェクトに帰属させ、threshold を超えたときにアラートを受け取ります。
早めにタグ付けを開始してください。各使用量レコードは、使用が発生したときにコンピュートに適用されるカスタムタグを保存します。そのため、タグを追加する前に実行された使用量を割り当てることはできません。
システムテーブルはコストデータのソースです
システムテーブルは、system カタログにある、Databricks がホストするアカウントの運用データの分析ストアです。system.billing.usage テーブルは、使用されたリソース、それらに適用されたカスタムタグ、および使用に関与したIDを含め、リージョン全体でアカウント内のすべてのワークスペースの課金利用を記録します。system.billing.list_prices テーブルには、時間の経過に伴う各SKUのリスト価格が記録されます。このセクションの利用ダッシュボードとコストクエリーは、これらのテーブルを読み取ります。一部のダッシュボードでは、コンピュート、ジョブ、サービングテーブルなど、他のシステムテーブルも読み取ります。
アカウント管理者ロールとメタストア管理者ロールの両方を持つユーザーは、defaultでシステムテーブルをクエリーできます。他のユーザーがそれらをクエリーできるようにするには、systemカタログでUSE CATALOGを許可し、システムスキーマでUSE SCHEMAとSELECTを許可します。システムテーブルへのアクセス権限の付与を参照してください。
クエリーの例については、「システムテーブルを使用したコストの監視」を参照してください。テーブルスキーマについては、 「課金利用システムテーブルリファレンス」を参照してください。
コストモニタリングの設定
次のタスクを順番に完了してください。
タスク | 説明 | ガイド |
|---|---|---|
使用状況ダッシュボードのインポート | 製品、SKU、およびカスタムタグによる事前構築済みの使用状況の内訳 | |
追加のダッシュボードインストール(オプション) | ジョブ、SQLウェアハウス、およびモデルサービングのコスト予測とコスト属性 | |
コンピュートとワークロードのタグ付け | チームやプロジェクトへの使用量配分用のカスタムタグ | |
予算の作成 | 毎月の支出のthresholdとEメールアラート |
次のステップ
-
- 使用状況ダッシュボードをインポート
- 使用状況ダッシュボードをインポートして、製品、SKU、およびカスタムタグ別の支出を表示する
-
- Databricksのコスト管理ツール
- Databricks のコスト管理およびコストモニタリング機能について説明します