サーバレスコンピュートに接続する
このページでは、 Databricksでサーバレスコンピュートを使用する方法と有効化する方法について説明します。
サーバレス コンピュートとは?
サーバレス コンピュートは、オンデマンドコンピューティングリソースに素早く接続できる Databricksマネージドサービスです。
サーバレス コンピュートを使用することを選択すると、 実行 ワークロード なしで プロビジョニング any コンピュート リソース in your クラウド アカウント. 代わりに、 Databricks は必要なコンピュート リソースを自動的に割り当てて管理します。 これにより、起動とスケーリングの時間が短縮され、アイドル時間が最小限に抑えられ、コンピュート リソースを管理する必要性が減ります。
サーバレスコンピュートの Databricks 実行の多くの機能。 サーバレス コンピュートをさまざまな機能で使用する方法については、次のページを参照してください。
-
サーバレス GPU コンピュート (Beta)
サーバレスコンピュートを有効化する
ノートブック、ジョブ、 Lakeflow 宣言型パイプラインのサーバレス コンピュートにアクセスするには、アカウント管理者がこの機能を有効にする必要があります。 Enable サーバレス コンピュートを参照してください。
サーバレス SQLウェアハウスにアクセスするには、 サーバレス SQLウェアハウスの有効化を参照してください。
サーバレスコンピュートの制限
制限事項の一覧については、 サーバレス コンピュートの制限事項を参照してください。
よくある質問(FAQ)
- リリースはどのようにロールアウトされますか?
- 実行しているサーバレスのバージョンを確認するにはどうすればよいですか?
- サーバレスのコストを見積もるにはどうすればよいですか?
- 特定のワークロードの DBU 使用状況を分析するにはどうすればよいですか?
- ジョブやクエリを実行してから、課金利用 システムテーブルに料金が表示されるまでに遅延はありますか?
- ジョブとノートブックでサーバレス コンピュートを有効にしていないのに、サーバレス ジョブの請求レコードが表示されるのはなぜですか?
- サーバレス コンピュートはプライベートリポジトリをサポートしていますか?
- ジョブタスクのライブラリをインストールするにはどうすればよいですか?
- カスタムデータソースに接続できますか?
- サーバレス コンピュート プレーン ネットワークはどのように機能しますか。
- サーバレス コンピュートを Databricks Asset Bundle のジョブに設定できますか?
- サーバレスのワークロードをローカルの開発マシンから実行するか、データアプリケーションから実行するか。
リリースはどのようにロールアウトされますか?
サーバレス コンピュートは バージョンレス 製品であるため、 Databricks はサーバレス コンピュート ランタイムを自動的にアップグレードして、プラットフォームの強化とアップグレードをサポートします。 すべてのユーザーに同じアップデートが配布され、短期間でロールアウトされます。
実行しているサーバレスのバージョンを確認するにはどうすればよいですか?
サーバレス ワークロードは、常に最新のランタイム バージョンで実行されます。 最新バージョンの リリースノート を参照してください。
サーバレスのコストを見積もるにはどうすればよいですか?
Databricks 、代表的なワークロードまたは特定のワークロードを実行してベンチマークし、請求システムテーブルを分析することをお勧めします。 課金利用 システムテーブル リファレンスを参照してください。
特定のワークロードの DBU 使用状況を分析するにはどうすればよいですか?
特定のワークロードのコストを確認するには、 system.billing.usage
システムテーブルをクエリします。 サンプルクエリとサーバレスコンピュートのコスト監視ダッシュボードのダウンロードについては、サーバレス コンピュートのコストの監視 を参照してください。
ジョブやクエリを実行してから、課金利用 システムテーブルに料金が表示されるまでに遅延はありますか?
はい、ワークロードを実行してからその使用量が課金利用 システムテーブルに反映されるまでに、最大 24 時間の遅延が発生する可能性があります。
ジョブとノートブックでサーバレス コンピュートを有効にしていないのに、サーバレス ジョブの請求レコードが表示されるのはなぜですか?
レイクハウスモニタリング と 予測的最適化 は、 サーバレス ジョブ SKUにも請求されます。
サーバレス コンピュートは、これら 2 つの機能を使用するために有効にする必要はありません。
サーバレス コンピュートはプライベートリポジトリをサポートしていますか?
リポジトリはプライベートにすることも、認証を要求することもできます。 セキュリティ上の理由から、認証されたリポジトリにアクセスするときは、事前に署名された URL が必要です。
ジョブタスクのライブラリをインストールするにはどうすればよいですか?
Databricks では、環境を使用してジョブのライブラリをインストールおよび管理することをお勧めします。ノートブック以外のジョブ・タスクの環境の構成を参照してください。
カスタムデータソースに接続できますか?
いいえ、レイクハウスフェデレーションを使用するソースのみ対応しています。 サポートされているデータソースを参照してください。
サーバレス コンピュート プレーン ネットワークはどのように機能しますか。
サーバレス コンピュート リソース 実行 は、 Databricksによって管理されるサーバレス コンピュート プレーンにあります。 ネットワークとアーキテクチャの詳細については、 サーバレス コンピュート プレーン ネットワーキングを参照してください。
アセットバンドルが Databricks のジョブにサーバレス コンピュートを設定できますか?
はい、 Databricks Asset Bundles を使用して、サーバレス コンピュートを使用するジョブを設定できます。 サーバレス コンピュートを使用するジョブを参照してください。
サーバレスのワークロードをローカルの開発マシンから実行するか、データアプリケーションから実行するか。
Databricks Connect を使用すると、ローカル マシンから Databricks に接続し、サーバレスでワークロードを実行できます。 「Databricks Connect とは」を参照してください。