レイクハウスフェデレーションのネットワークに関する推奨事項

この記事では、Databricks クラスターまたは SQLウェアハウスと、レイクハウスフェデレーションを使用して接続している外部データベースシステムとの間に実行可能なネットワークパスを設定するためのガイダンスを提供します。

次の重要な情報に留意してください。

すべてのネットワークトラフィックは、Databricks クラスター (または SQLウェアハウス) と外部データベースシステムの間で直接行われます。 Unity Catalog コントロールプレーンも Databricks コントロールプレーンもネットワークパス上にありません。
Databricks コンピュート (つまり、クラスターと SQLウェアハウス) は常にクラウド上でデプロイされますが、Databricks コンピュートと外部データベースの間に実行可能なネットワークパスがある限り、外部データベースシステムはオンプレミスまたは任意のクラウドプロバイダーでホストできます。
Databricks コンピュートまたは外部データベースシステムのいずれかに受信または送信のネットワーク制限がある場合は、実行可能なネットワークパスの作成に役立つ一般的なガイダンスについて、次のセクションを参照してください。

Databricks ワークスペースのネットワークの詳細については、「ネットワーク」を参照してください。

インターネットからアクセス可能なデータベースシステムとDatabricksコンピュート

接続は構成なしで機能するはずです。

データベースシステムのネットワークアクセス制限

外部データベースシステムに受信または送信のネットワークアクセス制限があり、 DatabricksクラスターまたはSQLウェアハウスにインターネットからアクセスできる場合は、クラシックデータベースリソースから接続するために、次のいずれかのネットワークソリューションを構成します。

Databricks コンピュートの安定したエグレス IP。

クラシックコンピュートプレーンから、ロードバランサー、NAT ゲートウェイ、インターネットゲートウェイ、または同等のものを使用して安定した IP アドレスを設定し、 Databricksコンピュートがデプロイされているサブネットに接続します。これにより、コンピュートリソースは、外部データベース側でホワイトリストに登録できる安定したパブリック IP アドレスを共有できるようになります。

サーバレスコンピュートプレーンから、安定した egress IP がサポートされます。「ステップ 1: ネットワーク接続構成を作成し、安定した IP をコピーする」を参照してください。

外部データベースシステムは、入力トラフィックと出力トラフィックの両方に対して Databricks コンピュート安定した IP を許可リストに登録する必要があります。

PrivateLink (外部データベースが Databricks コンピュートと同じクラウド上にある場合のみ)

クラシックコンピュートプレーンから、データベースがデプロイされているネットワークとDatabricksがデプロイされているネットワークの間に PrivateLink 接続を構成します。

Databricks コンピュートのネットワークアクセス制限

外部データベースシステムがインターネットからアクセス可能で、Databricks コンピュートに受信または送信ネットワークアクセス制限がある場合 (これは、顧客管理ネットワーク上にいる場合にのみ可能)、次のいずれかの構成を実行します。

Databricks コンピュートがデプロイされているサブネットのファイアウォール規則で、外部データベースのホスト名を許可リストに登録します。

ホスト名ではなく外部データベースの IP アドレスを許可リストに登録する場合は、外部データベースに安定した IP アドレスがあることを確認してください。
PrivateLink (外部データベースが Databricks コンピュートと同じクラウド上にある場合のみ)

データベースがデプロイされているネットワークと Databricks コンピュートがデプロイされているネットワークの間に PrivateLink 接続を構成します。

Databricks コンピュートのカスタムDNSサーバー

外部データベースシステムにインターネットからアクセス可能で、Databricks コンピュートにカスタム DNS サーバーがある場合 (これは、顧客管理ネットワーク上にいる場合にのみ可能です)、データベースシステムのホスト名をカスタム DNS サーバーに追加して解決できるようにします。