Databricks Runtime 11.x 移行ガイド

このガイドは、Databricks ワークロードを最新バージョンの Databricks Runtime 11.x に移行するのに役立ちます。 そのために、Databricks では、ワークロードを次の順序で移行することをお勧めします。

• ワークロードが現在 Databricks Runtime 10.4 LTS 以降で実行されている場合は、この記事の後半で説明するように、最新バージョンの Databricks Runtime 11.x に直接移行できます。
• ワークロードが現在 Databricks Runtime 9.1 LTS で実行されている場合は、次の操作を行います。
  1. 最初に Databricks Runtime 10.4 LTS に移行します。 Databricks Runtime 10.x 移行ガイドを参照してください。
  2. この記事のガイダンスに従って、Databricks Runtime 10.4 LTS から最新バージョンの Databricks Runtime 11.x に移行します。

注記

LTS は、このバージョンが 長期サポート 中であることを意味します。 「Databricks Runtime LTS バージョンのライフサイクル」を参照してください。

Apache Spark 移行ガイダンス

Databricks Runtime の最新バージョンは 13.2 で、Apache Spark 3.4.0 を利用しています。 Spark 固有の移行情報については、Databricks Runtime のバージョンごとに次のリンクを 1 つ以上クリックして、対応する Apache Spark 移行ガイドを表示します。 参考までに、Databricks Runtime 10.4 LTS は Apache Spark 3.2.1 を利用しています。

Databricks Runtimeのバージョン	Apache Sparkバージョン
11.0 - 11.3	3.3.0
10.4 LTS - 10.5	3.2.1

Databricks Runtime の動作の変更

次の重要な動作の変更は、次の各 DBR 11.x リリースに導入されました。

• Databricks Runtime 11.3 LTS
• Databricks Runtime 11.1
• Databricks Runtime 11.0

Databricks Runtime システム環境のプロパティ、機能、ライブラリ

Databricks RuntimeDatabricks Runtime10.4LTS から最新バージョンのDatabricks Runtime 11.x までの リリースのシステム環境プロパティ、および新機能、変更機能、および非推奨の機能とライブラリに関する情報については、以下を参照してください。

• 機械学習用Databricks Runtime 11.3 LTS
• Databricks Runtime 11.3 LTS
• 機械学習用 Databricks Runtime 10.4 LTS
• Databricks Runtime 10.4 LTS

リリース後のメンテナンス更新プログラムは、「 Databricks Runtime メンテナンス更新プログラム」に記載されています。