サーバーレスコンピュートに接続

この記事では、 Databricksで利用できる複数のサーバーレスオファリングについて説明します。サーバレスコンピュートを使用すると、オンデマンドコンピューティングリソースにすばやく接続できます。

このセクションの記事は、ノートブック、ジョブ、およびDelta Live Tablesサーバレスコンピュートに焦点を当てています。サーバレスSQLウェアハウスについては、「サーバレスSQLウェアハウスとは？」をご覧ください。モデルサービングの詳細については、「Databricksによるモデルサービング」を参照してください。

サーバレスコンピュートプレーンのアーキテクチャについては、サーバレスコンピュートプレーンを参照してください。

サーバレスコンピュートとは?

サーバレスコンピュートは、次のように生産性、コスト効率、信頼性を向上させます。

生産性: クラウドリソースはDatabricksによって管理されるため、管理オーバーヘッドが削減され、即時のコンピュートが提供され、ユーザーの生産性が向上します。
効率性: サーバレスコンピュートは起動とスケーリング時間が短く、アイドル時間が最小限に抑えられ、使用したコンピュートに対してのみ料金を支払うことができます。
信頼性: サーバレスコンピュートにより、容量処理、セキュリティ、パッチ適用、アップグレードが自動的に管理されるため、セキュリティポリシーや容量不足に関する懸念が軽減されます。

Databricksではどのような種類のサーバーレスコンピュートを利用できますか?

Databricksでは現在、次のタイプのサーバーレスコンピュートを提供しています。

ノートブック用のサーバレスコンピュート: ノートブックでSQLおよびPythonコードを実行するために使用される、オンデマンドでスケーラブルなコンピュート。
ジョブのサーバーレスコンピュート: インフラストラクチャの構成やデプロイを行わずに、 Databricksジョブを実行するために使用されるオンデマンドのスケーラブルなコンピュート。
サーバレスSQLウェアハウス: SQLエディタまたはインタラクティブエディタでデータオブジェクトに対してSQLコマンドを実行するために使用されるオンデマンドのエラスティックコンソール。 UI、CLI 、またはREST APIを使用して SQLウェアハウスを作成できます。
サーバレス DLT パイプライン: Delta Live Tablesパイプラインの更新用に最適化され、スケーラブルなパイプライン。
Mosaic AI Model Serving : AIモデルをデプロイするための高可用性と低レイテンシのサービス。

サーバーレスコンピュートを有効にする

ノートブック、ジョブ、およびDelta Live Tablesのサーバレスコンピュートにアクセスするには、アカウント管理者はアカウントレベルで機能を有効にする必要があります。有効化の詳細については、「サーバレスコンピュートを有効にする」を参照してください。

サーバーレスSQLウェアハウスとモデルサーバーの有効化は別のプロセスです。「サーバーレスSQLウェアハウスを有効にする」を参照してください。

サーバレスコンピュートの制限

制限事項の一覧については、「サーバレスコンピュートの制限事項」を参照してください。

よくある質問（FAQ）

リリースはどのようにロールアウトされますか?
実行しているサーバーレスバージョンを確認するにはどうすればよいですか?
サーバーレスのコストをどのように見積もればよいですか?
特定のワークロードの DBU 使用状況を分析するにはどうすればよいですか?
ジョブとノートブックのサーバレスコンピュートを有効にしていないのに、サーバレスジョブの請求レコードが表示されるのはなぜですか?
サーバレスコンピュートはプライベートリポジトリをサポートしていますか?
ジョブタスク用のライブラリをインストールするにはどうすればよいですか?
カスタムデータソースに接続できますか?
サーバレス・コンピュート・プレーン・ネットワーキングはどのように機能しますか?
サーバレスコンピュートを Databricks Asset Bundle のジョブに設定できますか?

リリースはどのようにロールアウトされますか?

サーバレスコンピュートはバージョンレス製品です。つまり、 Databricksサーバレスコンピュートを自動的にアップグレードして、プラットフォームの機能強化とアップグレードをサポートします。すべてのユーザーに同じアップデートが配布され、短期間でロールアウトされます。

実行しているサーバーレスバージョンを確認するにはどうすればよいですか?

サーバレスワークロードは常に最新バージョンで実行されます。最新バージョンについてはリリースノートを参照してください。

サーバーレスのコストをどのように見積もればよいですか?

Databricks 、代表的なワークロードまたは特定のワークロードを実行してベンチマークし、課金システムテーブルを分析することをお勧めします。課金利用システムテーブルリファレンスを参照してください。

特定のワークロードの DBU 使用状況を分析するにはどうすればよいですか?

特定のワークロードのコストを確認するには、 system.billing.usageシステムテーブルをクエリします。サンプルクエリとコスト観測ダッシュボードのダウンロードについては、「サーバーレスコンピュートのコスト監視」を参照してください。

ジョブとノートブックのサーバレスコンピュートを有効にしていないのに、サーバレスジョブの請求レコードが表示されるのはなぜですか?

レイクハウスモニタリングと予測的最適化も、サーバーレスジョブSKUに基づいて請求されます。

これら 2 つの機能を使用するために、サーバレスコンピュートを有効にする必要はありません。

サーバレスコンピュートはプライベートリポジトリをサポートしていますか?

リポジトリは非公開にすることも、認証を必要とすることもできます。セキュリティ上の理由から、認証されたリポジトリにアクセスする際には、事前に署名された URL が必要です。

ジョブタスク用のライブラリをインストールするにはどうすればよいですか?

Databricks では、ジョブのライブラリをインストールおよび管理するために環境を使用することをお勧めします。「ノートブック以外のタスクの環境と依存関係を構成する」を参照してください。

カスタムデータソースに接続できますか?

いいえ、レイクハウスフェデレーションを使用するソースのみがサポートされています。サポートされているデータソースを参照してください。

サーバレス・コンピュート・プレーン・ネットワーキングはどのように機能しますか?

serverless コンピュートリソースは、 Databricksによって管理される serverless コンピュートプレーンで実行されます。ネットワークとアーキテクチャの詳細については、「サーバレスコンピュートプレーンネットワーキング」を参照してください。

サーバレスコンピュートを Databricks Asset Bundle のジョブに設定できますか?

はい、 Databricks Asset Bundles を使用して、サーバレスコンピュートを使用するジョブを設定できます。サーバレスコンピュートを使用するジョブの設定を参照してください。