ネットワーキング

この記事では、Databricks アカウントとワークスペースのデプロイと管理のためのネットワーク構成について説明します。

注記

現在、サーバレス機能にはネットワーク料金はかかりません。それ以降のリリースでは、課金される場合があります。 Databricks は、ネットワーキングの価格変更について事前に通知します。

Databricks アーキテクチャの概要

Databricks は、 コントロールプレーン と コンピュートプレーン から動作します。

コントロールプレーン には、DatabricksアカウントでDatabricksが管理するバックエンドサービスが含まれます。 Webアプリケーションはコントロールプレーンにあります。
コンピュートプレーン は、データが処理される場所です。使用するコンピュートに応じた2 種類のコンピュートプレーンが存在します。
- クラシック Databricks コンピュートの場合、コンピュートリソースは Google Cloud リソース内の クラシックコンピュート平面 内にあります。これは、Google Cloud リソースとそのリソース内のネットワークを指します。クラシックコンピュートプランリソースは、ワークスペースがあるリージョンにあります。
- サーバレスコンピュートの場合、サーバレスコンピュートリソースは、お客様のDatabricksアカウントのサーバレスコンピュート plane で実行されます。サーバレスコンピュート plan リソースは、ワークスペースのクラシックコンピュート平面と同じクラウドリージョンにあります。このリージョンは、ワークスペースの作成時に選択します。

クラシックコンピュートとサーバレスコンピュートの詳細については、コンピュートの種類を参照してください。その他のアーキテクチャ情報については、「 Databricks アーキテクチャの概要」を参照してください。

Databricks はデフォルトで安全なネットワーク環境を提供しますが、組織に追加のニーズがある場合は、次の図に示すさまざまなネットワーク接続間でネットワーク接続機能を構成できます。

ネットワーク接続の概要図

Databricks へのユーザーとアプリケーション : アクセスを制御し、ユーザーと Databricks ワークスペース間のプライベート接続を提供する機能を構成できます。「Databricks ネットワークへのユーザー」を参照してください。
コントロールプレーンとクラシックコンピュートプレーン : クラシックコンピュートリソース(クラスターなど)がデプロイされているのは、Google Cloud リソース内にあり、コントロールプレーンに接続されています。クラシックネットワーク接続機能を使用して、クラシックコンピュートプレーンリソースを独自の仮想プライベートクラウドにデプロイし、クラスターからコントロールプレーンへのプライベート接続を有効にすることができます。「クラシックコンピュートプレーンネットワーク」を参照してください。
サーバレスコンピュートプレーンとストレージ :リソースでファイアウォールを設定して、サーバレスコンピュートプレーンからのアクセスを許可 Databricks 。サーバレスコンピュート plane networkingを参照してください。

GCPストレージネットワーク機能を設定して、コンピュートプレーンとGoogle Cloud Storageの間の接続を保護できます。詳細については、「レイクハウスフェデレーションのネットワークに関する推奨事項」を参照してください。

コントロールプレーンとサーバレスコンピュートプレーン間の接続は、パブリックインターネットではなく、常にクラウドネットワークバックボーン経由で行われます。