Databricks Runtime 14.2 for Machine Learning (EoS) (英語)
この Databricks Runtime バージョンのサポートは終了しました。 サポート終了日については、「 サポート終了の履歴」を参照してください。 サポートされているすべての Databricks Runtime バージョンについては、「 Databricks Runtime リリースノートのバージョンと互換性」を参照してください。
Databricks Runtime 14.2 for Machine Learning は、 Databricks Runtime 14.2 (EoS) に基づく機械学習とデータサイエンスのためのすぐに使える環境を提供します。 Databricks Runtime ML には、TensorFlow、PyTorch、XGBoost など、多くの一般的な機械学習ライブラリが含まれています。 Databricks Runtime ML には、機械学習パイプラインを自動的にトレーニングするツールである AutoML が含まれています。 Databricks Runtime ML は、 Horovodを使用した分散ディープラーニング トレーニングもサポートしています。
サポート終了 (EoS) に達した Databricks Runtime バージョンのリリースノートを表示するには、「 サポート終了 Databricks Runtime リリースノート」を参照してください。 EoS Databricks Runtime のバージョンは廃止されており、更新されない可能性があります。
新機能と改善点
Databricks Runtime 14.2 ML は、Databricks Runtime 14.2 の上に構築されています。Databricks Runtime 14.2 の新機能 (Apache Spark MLlib や SparkRなど) については、Databricks Runtime 14.2 (EoS) リリースノートを参照してください。
システム環境
Databricks Runtime 14.2 ML のシステム環境は、Databricks Runtime 14.2 と次のように異なります。
- DBUtils : Databricks Runtime ML には、 ライブラリ ユーティリティ (dbutils.ライブラリ) (legacy) は含まれません。代わりに
%pip
コマンドを使用してください。 ノートブック スコープの Python ライブラリを参照してください。 - GPU クラスターの場合、 Databricks Runtime ML には次の NVIDIA GPU ライブラリが含まれています。
- CUDA 11.8
- cuDNN 8.9.0.131-1
- NCCLの2.15.5
- TensorRT 8.5.3-1
Databricks Runtime 14.2 ML には XGBoost 1.7.6 が含まれていますが、 これはコンピュート機能 5.2 以下の GPU クラスターをサポートしていません。
ライブラリ
次のセクションでは、Databricks Runtime 14.2 ML に含まれるライブラリのうち、Databricks Runtime 14.2 に含まれるライブラリと異なるライブラリの一覧を示します。
このセクションの内容:
トップクラスのライブラリ
Databricks Runtime 14.2 ML には、次の最上位 ライブラリが含まれています。
- GraphFrames
- HorovodとHorovodRunner
- MLflow
- PyTorch
- spark-tensorflow-connector
- TensorFlow
- TensorBoard
- Scikit-learn
Python ライブラリ
Databricks Runtime 14.2 ML は、Python パッケージ管理に virtualenv
を使用し、多くの一般的な ML パッケージが含まれています。
次のセクションで指定されているパッケージに加えて、Databricks Runtime 14.2 ML には次のパッケージも含まれています。
- hyperopt 0.2.7 + db4
- sparkdl 3.0.0_db1
- AUTOML 1.23.0
Databricks Runtime ML Python 環境をローカルの Python 仮想環境に再現するには、 requirements-14.2.txt ファイルをダウンロードして pip install -r requirements-14.2.txt
を実行します。 このコマンドは、Databricks Runtime ML が使用するすべてのオープンソース ライブラリをインストールしますが、databricks-automl
、databricks-feature-store
、hyperopt
の Databricks fork など、Databricksが開発したライブラリはインストールしません。
Python ライブラリ on CPU クラスター
ライブラリ | バージョン | ライブラリ | バージョン | ライブラリ | バージョン |
---|---|---|---|---|---|
absl-py | 1.0.0 | 早める | 0.23.0 | AIOhttp | 3.8.6 |
AIOシグナル | 1.3.1 | アニオ | 3.5.0 | appdirs (英語) | 1.4.4 |
アルゴン2-CFFI | 21.3.0 | argon2-cffi-結合 | 21.2.0 | アスター | 0.8.1 |
アストトークンズ | 2.0.5 | アストゥンパース | 1.6.3 | 非同期タイムアウト | 4.0.3 |
属性 | 22.1.0 | オーディオ読み取り | 3.0.1 | azure-core | 1.29.1 |
azure-cosmos | 4.3.1 | azure-storage-blob | 12.18.3 | azure-storage-file-datalake | 12.13.2 |
バックコール | 0.2.0 | bcryptの | 3.2.0 | 美しいスープ4 | 4.11.1 |
黒い | 22.6.0 | ブリーチ | 4.1.0 | ウィンカー | 1.4 |
ブリス | 0.7.11 | ボト3 | 1.24.28 | ボトコア | 1.27.96 |
cachetools | 5.3.2 | カタログ | 2.0.10 | カテゴリ-エンコーダー | 2.6.2 |
認証 | 2022.12.7 | cffi | 1.15.1 | シャルデ | 4.0.0 |
文字セット・ノーマライザー | 2.0.4 | クリック | 8.0.4 | クラウドパスライブラリ | 0.16.0 |
クラウドピクルス | 2.0.0 | cmdstanpyさん | 1.2.0 | 通信 | 0.1.2 |
コンフェクション | 0.1.3 | コンフィグパーサー | 5.2.0 | コントルピー | 1.0.5 |
暗号化手法 | 39.0.1 | サーマルサイクラー | 0.11.0 | サイメム | 2.0.8 |
シトン | 0.29.32 | デイサイト | 1.8.1 | Databricks 自動 ml ランタイム | 0.2.20 |
Databricks の CLI | 0.18.0 | databricks-feature-engineering (データブリック - 特徴量エンジニアリング) | 0.1.2 | databricks-feature-store | 0.16.1 |
Databricks の SDK | 0.1.6 | データクラス-JSON | 0.6.1 | データセット | 2.14.5 |
DBLテンポ | 0.1.26 | DBUSPython | 1.2.18 | デバッグ | 1.6.7 |
デコレータ | 5.1.1 | ディープスピード | 0.11.1 | デフューズドXML | 0.7.1 |
ディル | 0.3.6 | ディスクキャッシュ | 5.6.3 | ディストリビューション | 0.3.7 |
docstring-to-markdown | 0.11 | エントリポイント | 0.4 | 評 | 0.4.1 |
実行 | 0.8.3 | facets-概要 | 1.1.1 | fastjsonスキーマ | 2.18.1 |
ファストテキスト | 0.9.2 | ファイルロック | 3.9.0 | flask | 2.2.5 |
フラットバッファ | 23.5.26 | fonttools | 4.25.0 | フローズンリスト | 1.4.0 |
FSSPECの | 2023.6.0 | 未来 | 0.18.3 | ガスト | 0.4.0 |
ギットDB | 4.0.11 | ギットパイソン | 3.1.27 | グーグルAPIコア | 2.12.0 |
グーグル認証 | 2.21.0 | グーグル認証 - oauthlib | 1.0.0 | グーグルクラウドコア | 2.3.3 |
Google Cloud Storage | 2.11.0 | グーグル-CRC32C | 1.5.0 | グーグルパスタ | 0.2.0 |
Googleの再開可能なメディア | 2.6.0 | googleapis-common-protos | 1.61.0 | グリーンレット | 2.0.1 |
grpcio | 1.48.2 | grpcio-ステータス | 1.48.1 | gunicorn | 20.1.0 |
gviz-api | 1.10.0 | h5pyさん | 3.7.0 | hjson | 3.1.0 |
休日 | 0.35 | Horovod | 0.28.1 | htmlmin | 0.1.12 |
httplib2の | 0.20.2 | 抱きしめるface-hub | 0.16.4 | イドナ | 3.4 |
イメージハッシュ | 4.3.1 | 不均衡な学習 | 0.11.0 | importlib-metadata | 4.11.3 |
importlib-リソース | 6.1.0 | ipykernel(英語) | 6.25.0 | アイパイソン | 8.14.0 |
ipython-genutils | 0.2.0 | ipywidgets | 7.7.2 | イソデート | 0.6.1 |
それは危険です | 2.0.1 | ジェダイ | 0.18.1 | ジープニー | 0.7.1 |
ジンジャ2 | 3.1.2 | jmespathの | 0.10.0 | ジョブリブ | 1.2.0 |
ジョブリブスパーク | 0.5.1 | jsonパッチ | 1.33 | jsonポインター | 2.4 |
jsonschema(jsonschema) | 4.17.3 | jupyter-クライアント | 7.3.4 | jupyter-server | 1.23.4 |
jupyter_core | 5.2.0 | jupyterlab-pygmentsの | 0.1.2 | jupyterlab-widgetsの | 1.0.0 |
keras | 2.14.0 | キーリング | 23.5.0 | キウイソルバー | 1.4.4 |
ラングチェーン | 0.0.314 | ラングコード | 3.3.0 | ラングスミス | 0.0.56 |
ローンチパッドリブ | 1.10.16 | lazr.restfulクライアント | 0.14.4 | lazr.uri です。 | 1.0.6 |
lazy_loader | 0.3 | リブクラン | 15.0.6.1 | てんびん座 | 0.10.1 |
LightGBM | 4.1.0 | LLVMLITEの | 0.39.1 | lxml の | 4.9.1 |
アオザメ | 1.2.0 | Markdown | 3.4.1 | マークアップセーフ | 2.1.1 |
マシュマロ | 3.20.1 | Matplotlib | 3.7.0 | matplotlib-インライン | 0.1.6 |
マッケイブ | 0.7.0 | ミスチューン | 0.8.4 | ml-dタイプ | 0.2.0 |
mlflow-skinny | 2.8.0 | もっと-itertools | 8.10.0 | MPMATHの | 1.2.1 |
msgpackの | 1.0.7 | マルチディクト | 6.0.4 | マルチメソッド | 1.10 |
マルチプロセス | 0.70.14 | つぶやき | 1.0.10 | mypy-extensions | 0.4.3 |
NBクラシック | 0.5.2 | NBクライアント | 0.5.13 | NBコンバート | 6.5.4 |
NBフォーマット | 5.7.0 | ネスト-アシンシオ | 1.5.6 | ネットワークX | 2.8.4 |
忍者 | 1.11.1.1 | nltk | 3.7 | ノードenv | 1.8.0 |
ノートブック | 6.5.2 | ノートブック | 0.2.2 | ナンバ | 0.56.4 |
ナムピー | 1.23.5 | OAuthlib | 3.2.0 | OpenAI | 0.28.1 |
オプトアインサム | 3.3.0 | 包装 | 22.0 | pandas | 1.5.3 |
pandocフィルター | 1.5.0 | パラミコ | 2.9.2 | パルソ | 0.8.3 |
パススペック | 0.10.3 | パシー | 0.10.3 | パッツィ | 0.5.3 |
petastorm | 0.12.1 | pexpect | 4.8.0 | ピク | 0.12.3 |
ピクルシェア | 0.7.5 | 枕 | 9.4.0 | 種 | 22.3.1 |
プラットフォームディレクトリ | 2.5.2 | Plotly | 5.9.0 | プラギー | 1.0.0 |
エムダリマ | 2.0.3 | 犬 | 1.4.0 | プレシェッド | 3.0.9 |
prometheus-クライアント | 0.14.1 | プロンプトツールキット | 3.0.36 | Prophet | 1.1.5 |
プロトブフ | 4.24.0 | psutil の | 5.9.0 | サイコップ2 | 2.9.3 |
PTYPROCESSの | 0.7.0 | ピュア評価 | 0.2.2 | py-cpuinfo | 9.0.0 |
ピアロー | 8.0.0 | pyasn1 | 0.4.8 | pyasn1モジュール | 0.2.8 |
pybind11 | 2.11.1 | pycparser | 2.21 | ピダンティック | 1.10.6 |
パイフレーク | 3.1.0 | ピグメント | 2.11.2 | PyGObject | 3.42.1 |
PyJWTの | 2.3.0 | PyNaClの | 1.5.0 | pyodbc | 4.0.32 |
pyparsing (英語) | 3.0.9 | パイライト | 1.1.294 | ピルシステント | 0.18.0 |
ピテッセラクト | 0.3.10 | Python-dateutil | 2.8.2 | Pythonエディタ | 1.0.4 |
Python-lsp-jsonrpc | 1.1.1 | Python-lsp-server | 1.8.0 | pytoolconfig(ピーツールコンフィグ) | 1.2.5 |
ピッツ | 2022.7 | Pyウェーブレット | 1.4.1 | PyYAML (英語) | 6.0 |
ピズム | 23.2.0 | 正規表現 | 2022.7.9 | 要求 | 2.28.1 |
リクエスト-oauthlib | 1.3.1 | 応答 | 0.18.0 | 縄 | 1.7.0 |
rsa | 4.9 | S3トランスファー | 0.6.2 | セーフテンソル | 0.4.0 |
Scikit-Learn | 1.1.1 | scipy(サイピー) | 1.10.0 | シーボーン | 0.12.2 |
シークレットストレージ | 3.3.1 | Send2Trash(センド2トラッシュ) | 1.8.0 | センテンストランスフォーマー | 2.2.2 |
センテンスピース | 0.1.99 | セットアップツール | 65.6.3 | シャップ | 0.43.0 |
シンプルJSON | 3.17.6 | 6 | 1.16.0 | スライサー | 0.0.7 |
スマートオープン | 5.2.1 | SMMAPの | 5.0.0 | スニフィオ | 1.2.0 |
サウンドファイル | 0.12.1 | スープふるい | 2.3.2.投稿1 | ソックスアール | 0.3.7 |
スペイシー | 3.7.1 | スペイシーレガシー | 3.0.12 | スペイシーロガー | 1.0.5 |
スパークテンソルフローディストリビューター | 1.0.0 | SQLAlchemy (英語) | 1.4.39 | sqlparse | 0.4.2 |
srslyの | 2.4.8 | ssh-import-id | 5.11 | スタックデータ | 0.2.0 |
スタニオ | 0.3.0 | 統計モデル | 0.13.5 | シンピー | 1.11.1 |
表 | 0.8.10 | Unicodeで絡み合った | 0.2.0 | 持久力 | 8.1.0 |
TensorBoard | 2.14.0 | TensorBoard-data-server | 0.7.2 | TensorBoard-plugin-profile | 2.14.0 |
テンソルフロー-CPU | 2.14.0 | テンソルフロー推定器 | 2.14.0 | tensorflow-io-GCS-ファイルシステム | 0.34.0 |
タームカラー | 2.3.0 | テルミナド | 0.17.1 | シンク | 8.2.1 |
スレッドプールctl | 2.2.0 | ティックトークン | 0.5.1 | tinycss2 | 1.2.1 |
トークン化-RT | 4.2.1 | トークナイザー | 0.14.0 | トムリ | 2.0.1 |
トーチ | 2.0.1+CPU | トーチビジョン | 0.15.2+CPU | 竜巻 | 6.1 |
tqdm | 4.64.1 | トレイトレット | 5.7.1 | トランスフォーマー | 4.34.0 |
タイプガード | 2.13.3 | タイパー | 0.9.0 | タイピング検査 | 0.9.0 |
typing_extensions | 4.4.0 | ujson | 5.4.0 | 無人アップグレード | 0.1 |
urllib3 の | 1.26.14 | virtualenv | 20.16.7 | ビジョン | 0.7.5 |
ワドリブ | 1.3.6 | 山葵 | 1.1.2 | WC幅 | 0.2.5 |
鼬 | 0.3.3 | webエンコーディング | 0.5.1 | websocket-クライアント | 0.58.0 |
ヴェルクツォイク | 2.2.2 | パッチ | 1.0.2 | 輪 | 0.38.4 |
widgetsnb拡張機能 | 3.6.1 | ワードクラウド | 1.9.2 | ラッピング | 1.14.1 |
XGBoost | 1.7.6 | xxhashの | 3.4.1 | ヤップ | 0.33.0 |
ヤール | 1.9.2 | ydata-プロファイリング | 4.2.0 | ジップ | 3.11.0 |
Python ライブラリ on GPU クラスター
ライブラリ | バージョン | ライブラリ | バージョン | ライブラリ | バージョン |
---|---|---|---|---|---|
absl-py | 1.0.0 | 早める | 0.23.0 | AIOhttp | 3.8.6 |
AIOシグナル | 1.3.1 | アニオ | 3.5.0 | appdirs (英語) | 1.4.4 |
アルゴン2-CFFI | 21.3.0 | argon2-cffi-結合 | 21.2.0 | アスター | 0.8.1 |
アストトークンズ | 2.0.5 | アストゥンパース | 1.6.3 | 非同期タイムアウト | 4.0.3 |
属性 | 22.1.0 | オーディオ読み取り | 3.0.1 | azure-core | 1.29.1 |
azure-cosmos | 4.3.1 | azure-storage-blob | 12.18.3 | azure-storage-file-datalake | 12.13.2 |
バックコール | 0.2.0 | bcryptの | 3.2.0 | 美しいスープ4 | 4.11.1 |
黒い | 22.6.0 | ブリーチ | 4.1.0 | ウィンカー | 1.4 |
ブリス | 0.7.11 | ボト3 | 1.24.28 | ボトコア | 1.27.96 |
cachetools | 5.3.2 | カタログ | 2.0.10 | カテゴリ-エンコーダー | 2.6.2 |
認証 | 2022.12.7 | cffi | 1.15.1 | シャルデ | 4.0.0 |
文字セット・ノーマライザー | 2.0.4 | クリック | 8.0.4 | クラウドパスライブラリ | 0.16.0 |
クラウドピクルス | 2.0.0 | cmakeの | 3.27.7 | cmdstanpyさん | 1.2.0 |
通信 | 0.1.2 | コンフェクション | 0.1.3 | コンフィグパーサー | 5.2.0 |
コントルピー | 1.0.5 | 暗号化手法 | 39.0.1 | サーマルサイクラー | 0.11.0 |
サイメム | 2.0.8 | シトン | 0.29.32 | デイサイト | 1.8.1 |
Databricks 自動 ml ランタイム | 0.2.20 | Databricks の CLI | 0.18.0 | databricks-feature-engineering (データブリック - 特徴量エンジニアリング) | 0.1.2 |
databricks-feature-store | 0.16.1 | Databricks の SDK | 0.1.6 | データクラス-JSON | 0.6.1 |
データセット | 2.14.5 | DBLテンポ | 0.1.26 | DBUSPython | 1.2.18 |
デバッグ | 1.6.7 | デコレータ | 5.1.1 | ディープスピード | 0.11.1 |
デフューズドXML | 0.7.1 | ディル | 0.3.6 | ディスクキャッシュ | 5.6.3 |
ディストリビューション | 0.3.7 | docstring-to-markdown | 0.11 | エイノップス | 0.7.0 |
エントリポイント | 0.4 | 評 | 0.4.1 | 実行 | 0.8.3 |
facets-概要 | 1.1.1 | fastjsonスキーマ | 2.18.1 | ファストテキスト | 0.9.2 |
ファイルロック | 3.9.0 | フラッシュアッティン | 2.3.2 | flask | 2.2.5 |
フラットバッファ | 23.5.26 | fonttools | 4.25.0 | フローズンリスト | 1.4.0 |
FSSPECの | 2023.6.0 | 未来 | 0.18.3 | ガスト | 0.4.0 |
ギットDB | 4.0.11 | ギットパイソン | 3.1.27 | グーグルAPIコア | 2.12.0 |
グーグル認証 | 2.21.0 | グーグル認証 - oauthlib | 1.0.0 | グーグルクラウドコア | 2.3.3 |
Google Cloud Storage | 2.11.0 | グーグル-CRC32C | 1.5.0 | グーグルパスタ | 0.2.0 |
Googleの再開可能なメディア | 2.6.0 | googleapis-common-protos | 1.61.0 | グリーンレット | 2.0.1 |
grpcio | 1.48.2 | grpcio-ステータス | 1.48.1 | gunicorn | 20.1.0 |
gviz-api | 1.10.0 | h5pyさん | 3.7.0 | hjson | 3.1.0 |
休日 | 0.35 | Horovod | 0.28.1 | htmlmin | 0.1.12 |
httplib2の | 0.20.2 | 抱きしめるface-hub | 0.16.4 | イドナ | 3.4 |
イメージハッシュ | 4.3.1 | 不均衡な学習 | 0.11.0 | importlib-metadata | 4.11.3 |
importlib-リソース | 6.1.0 | ipykernel(英語) | 6.25.0 | アイパイソン | 8.14.0 |
ipython-genutils | 0.2.0 | ipywidgets | 7.7.2 | イソデート | 0.6.1 |
それは危険です | 2.0.1 | ジェダイ | 0.18.1 | ジープニー | 0.7.1 |
ジンジャ2 | 3.1.2 | jmespathの | 0.10.0 | ジョブリブ | 1.2.0 |
ジョブリブスパーク | 0.5.1 | jsonパッチ | 1.33 | jsonポインター | 2.4 |
jsonschema(jsonschema) | 4.17.3 | jupyter-クライアント | 7.3.4 | jupyter-server | 1.23.4 |
jupyter_core | 5.2.0 | jupyterlab-pygmentsの | 0.1.2 | jupyterlab-widgetsの | 1.0.0 |
keras | 2.14.0 | キーリング | 23.5.0 | キウイソルバー | 1.4.4 |
ラングチェーン | 0.0.314 | ラングコード | 3.3.0 | ラングスミス | 0.0.56 |
ローンチパッドリブ | 1.10.16 | lazr.restfulクライアント | 0.14.4 | lazr.uri です。 | 1.0.6 |
lazy_loader | 0.3 | リブクラン | 15.0.6.1 | てんびん座 | 0.10.1 |
LightGBM | 4.1.0 | 点灯 | 17.0.4 | LLVMLITEの | 0.39.1 |
lxml の | 4.9.1 | アオザメ | 1.2.0 | Markdown | 3.4.1 |
マークアップセーフ | 2.1.1 | マシュマロ | 3.20.1 | Matplotlib | 3.7.0 |
matplotlib-インライン | 0.1.6 | マッケイブ | 0.7.0 | ミスチューン | 0.8.4 |
ml-dタイプ | 0.2.0 | mlflow-skinny | 2.8.0 | もっと-itertools | 8.10.0 |
MPMATHの | 1.2.1 | msgpackの | 1.0.7 | マルチディクト | 6.0.4 |
マルチメソッド | 1.10 | マルチプロセス | 0.70.14 | つぶやき | 1.0.10 |
mypy-extensions | 0.4.3 | NBクラシック | 0.5.2 | NBクライアント | 0.5.13 |
NBコンバート | 6.5.4 | NBフォーマット | 5.7.0 | ネスト-アシンシオ | 1.5.6 |
ネットワークX | 2.8.4 | 忍者 | 1.11.1.1 | nltk | 3.7 |
ノードenv | 1.8.0 | ノートブック | 6.5.2 | ノートブック | 0.2.2 |
ナンバ | 0.56.4 | ナムピー | 1.23.5 | OAuthlib | 3.2.0 |
OpenAI | 0.28.1 | オプトアインサム | 3.3.0 | 包装 | 22.0 |
pandas | 1.5.3 | pandocフィルター | 1.5.0 | パラミコ | 2.9.2 |
パルソ | 0.8.3 | パススペック | 0.10.3 | パシー | 0.10.3 |
パッツィ | 0.5.3 | petastorm | 0.12.1 | pexpect | 4.8.0 |
ピク | 0.12.3 | ピクルシェア | 0.7.5 | 枕 | 9.4.0 |
種 | 22.3.1 | プラットフォームディレクトリ | 2.5.2 | Plotly | 5.9.0 |
プラギー | 1.0.0 | エムダリマ | 2.0.3 | 犬 | 1.4.0 |
プレシェッド | 3.0.9 | プロンプトツールキット | 3.0.36 | Prophet | 1.1.5 |
プロトブフ | 4.24.0 | psutil の | 5.9.0 | サイコップ2 | 2.9.3 |
PTYPROCESSの | 0.7.0 | ピュア評価 | 0.2.2 | py-cpuinfo | 9.0.0 |
ピアロー | 8.0.0 | pyasn1 | 0.4.8 | pyasn1モジュール | 0.2.8 |
pybind11 | 2.11.1 | pycparser | 2.21 | ピダンティック | 1.10.6 |
パイフレーク | 3.1.0 | ピグメント | 2.11.2 | PyGObject | 3.42.1 |
PyJWTの | 2.3.0 | PyNaClの | 1.5.0 | pyodbc | 4.0.32 |
pyparsing (英語) | 3.0.9 | パイライト | 1.1.294 | ピルシステント | 0.18.0 |
ピテッセラクト | 0.3.10 | Python-dateutil | 2.8.2 | Pythonエディタ | 1.0.4 |
Python-lsp-jsonrpc | 1.1.1 | Python-lsp-server | 1.8.0 | pytoolconfig(ピーツールコンフィグ) | 1.2.5 |
ピッツ | 2022.7 | Pyウェーブレット | 1.4.1 | PyYAML (英語) | 6.0 |
ピズム | 23.2.0 | 正規表現 | 2022.7.9 | 要求 | 2.28.1 |
リクエスト-oauthlib | 1.3.1 | 応答 | 0.18.0 | 縄 | 1.7.0 |
rsa | 4.9 | S3トランスファー | 0.6.2 | セーフテンソル | 0.4.0 |
Scikit-Learn | 1.1.1 | scipy(サイピー) | 1.10.0 | シーボーン | 0.12.2 |
シークレットストレージ | 3.3.1 | Send2Trash(センド2トラッシュ) | 1.8.0 | センテンストランスフォーマー | 2.2.2 |
センテンスピース | 0.1.99 | セットアップツール | 65.6.3 | シャップ | 0.43.0 |
シンプルJSON | 3.17.6 | 6 | 1.16.0 | スライサー | 0.0.7 |
スマートオープン | 5.2.1 | SMMAPの | 5.0.0 | スニフィオ | 1.2.0 |
サウンドファイル | 0.12.1 | スープふるい | 2.3.2.投稿1 | ソックスアール | 0.3.7 |
スペイシー | 3.7.1 | スペイシーレガシー | 3.0.12 | スペイシーロガー | 1.0.5 |
スパークテンソルフローディストリビューター | 1.0.0 | SQLAlchemy (英語) | 1.4.39 | sqlparse | 0.4.2 |
srslyの | 2.4.8 | ssh-import-id | 5.11 | スタックデータ | 0.2.0 |
スタニオ | 0.3.0 | 統計モデル | 0.13.5 | シンピー | 1.11.1 |
表 | 0.8.10 | Unicodeで絡み合った | 0.2.0 | 持久力 | 8.1.0 |
TensorBoard | 2.14.0 | TensorBoard-data-server | 0.7.2 | TensorBoard-plugin-profile | 2.14.0 |
TensorFlow | 2.14.0 | テンソルフロー推定器 | 2.14.0 | tensorflow-io-GCS-ファイルシステム | 0.34.0 |
タームカラー | 2.3.0 | テルミナド | 0.17.1 | シンク | 8.2.1 |
スレッドプールctl | 2.2.0 | ティックトークン | 0.5.1 | tinycss2 | 1.2.1 |
トークン化-RT | 4.2.1 | トークナイザー | 0.14.0 | トムリ | 2.0.1 |
トーチ | 2.0.1 + CU118 | トーチビジョン | 0.15.2+cu118 | 竜巻 | 6.1 |
tqdm | 4.64.1 | トレイトレット | 5.7.1 | トランスフォーマー | 4.34.0 |
トライトン | 2.0.0 | タイプガード | 2.13.3 | タイパー | 0.9.0 |
タイピング検査 | 0.9.0 | typing_extensions | 4.4.0 | ujson | 5.4.0 |
無人アップグレード | 0.1 | urllib3 の | 1.26.14 | virtualenv | 20.16.7 |
ビジョン | 0.7.5 | ワドリブ | 1.3.6 | 山葵 | 1.1.2 |
WC幅 | 0.2.5 | 鼬 | 0.3.3 | webエンコーディング | 0.5.1 |
websocket-クライアント | 0.58.0 | ヴェルクツォイク | 2.2.2 | パッチ | 1.0.2 |
輪 | 0.38.4 | widgetsnb拡張機能 | 3.6.1 | ワードクラウド | 1.9.2 |
ラッピング | 1.14.1 | XGBoost | 1.7.6 | xxhashの | 3.4.1 |
ヤップ | 0.33.0 | ヤール | 1.9.2 | ydata-プロファイリング | 4.2.0 |
ジップ | 3.11.0 |
R ライブラリ
R ライブラリは、Databricks Runtime14.2 の R ライブラリ と同じです。
Java and Scala ライブラリ (Scala 2.12 クラスター)
Databricks Runtime 14.2 ML には、Databricks Runtime 14.2 の Java ライブラリと Scala ライブラリに加えて、次の JAR が含まれています。
CPU クラスター
グループID | アーティファクト ID | バージョン |
---|---|---|
com.typesafe.akka (英語) | アッカ-actor_2.12 | 2.5.23 |
ml.dmlc | XGBOOST4Jのspark_2.12 | 1.7.3 |
ml.dmlc | xgboost4j_2.12 | 1.7.3 |
org.graphframes | graphframes_2.12 | 0.8.2-db2-spark3.4 |
org.mlflowの | mlflow-クライアント | 2.8.0 |
組織Scala-lang.modules | Scala-java8-compat_2.12 | 0.8.0 |
org.tensorflowの | spark-tensorflow-connector_2.12 | 1.15.0 |
GPU クラスター
グループID | アーティファクト ID | バージョン |
---|---|---|
com.typesafe.akka (英語) | アッカ-actor_2.12 | 2.5.23 |
ml.dmlc | XGBOOST4Jのgpu_2.12 | 1.7.3 |
ml.dmlc | xgboost4j-spark-gpu_2.12 | 1.7.3 |
org.graphframes | graphframes_2.12 | 0.8.2-db2-spark3.4 |
org.mlflowの | mlflow-クライアント | 2.8.0 |
組織Scala-lang.modules | Scala-java8-compat_2.12 | 0.8.0 |
org.tensorflowの | spark-tensorflow-connector_2.12 | 1.15.0 |