Pular para o conteúdo principal

Databricks Runtime 16.0 para aprendizado de máquina (EoS)

nota

O suporte para essa versão do Databricks Runtime foi encerrado. Para saber a data do fim do suporte, consulte Histórico do fim do suporte. Para conhecer todas as versões compatíveis do site Databricks Runtime, consulte Databricks Runtime notas sobre versões e compatibilidade.

O Databricks Runtime 16.0 for Machine Learning oferece um ambiente pronto para uso para aprendizado de máquina e ciência de dados com base no Databricks Runtime 16.0 (EoS). Databricks Runtime ML Contém muitas bibliotecas populares de aprendizado de máquina, incluindo TensorFlow, PyTorch, e XGBoost. Databricks Runtime ML inclui AutoMLuma ferramenta para treinar automaticamente o pipeline de aprendizado de máquina. O Databricks Runtime ML também oferece suporte ao treinamento de aprendizagem profunda distribuída usando TorchDistributor, DeepSpeed e Ray.

dica

Para ver as notas sobre a versão das versões do site Databricks Runtime que chegaram ao fim do suporte (EoS), consulte Fim do suporte Databricks Runtime notas sobre a versão. As versões do EoS Databricks Runtime foram retiradas e podem não ser atualizadas.

Novos recursos e melhorias

O Databricks Runtime 16.0 ML foi desenvolvido com base no Databricks Runtime 16.0. Para obter informações sobre as novidades do Databricks Runtime 16.0, incluindo Apache Spark MLlib e SparkR, consulte as notas sobre a versão Databricks Runtime 16.0 (EoS).

Novo Python pacote

Os seguintes pacotes Python foram adicionados a Databricks Runtime ML:

  • compositor 0.24.1
  • opção 3.6.1

Pesos de amostra AutoML para previsão

AutoML agora suporta pesos de amostra para previsão, permitindo que o senhor ajuste a importância de cada série temporal para modelos de previsão de treinamento com várias séries temporais. Para obter mais informações, consulte os parâmetros de previsão para o site AutoML Python API .

Use o site view em Unity Catalog como uma tabela de recursos

Agora, o senhor pode usar o site view em Unity Catalog como uma tabela de recursos. Consulte Usar uma view existente em Unity Catalog como uma tabela de recurso.

Outras mudanças

Horovod, HorovodRunner, Petastorm, spark-tensorflow-distributor removido

Os pacotes a seguir, que estavam incluídos nas versões anteriores do Databricks Runtime ML , não estão incluídos no Databricks Runtime 16.0 ML:

  • Horovod
  • HorovodRunner
  • Petastorm
  • spark-tensorflow-distributor

A Databricks recomenda as seguintes substituições:

  • Para a aprendizagem profunda distribuída, a Databricks recomenda usar o TorchDistributor para treinamento distribuído com o PyTorch ou a API tf.distribute.Strategy para treinamento distribuído com o TensorFlow.
  • Para carregar grandes conjuntos de dados do armazenamento em nuvem, o site Databricks recomenda o uso da transmissão Mosaic.
  • Para treinamento distribuído para um TensorFlow ou modelo Keras, o Databricks recomenda o uso do Ray. Consulte Ray on Databricks e a documentação do Ray.

Ambiente do sistema

O ambiente do sistema no Databricks Runtime 16.0 ML difere do Databricks Runtime 16.0 da seguinte forma:

  • Para o clustering de GPU, o site Databricks Runtime ML inclui a seguinte biblioteca de GPUs NVIDIA:
    • CUDA 12.6
    • cublas 12.6.0.22-1
    • cusolver 11.6.4.38-1
    • cupti 12.6.37-1
    • cusparse 12.5.2.23-1
    • cuDNN 9.3.0.75-1
    • NCL 2.22.3
    • TensorRT 10.2.0.19-1

biblioteca

As seções a seguir listam as bibliotecas incluídas no Databricks Runtime 16.0 ML que diferem daquelas incluídas no Databricks Runtime 16.0.

Nesta secção:

Biblioteca de primeira linha

Databricks Runtime 16.0 ML inclui as seguintes bibliotecas de primeira linha:

Python biblioteca

Databricks Runtime 16.0 O ML usa o virtualenv para o gerenciamento do pacote Python e inclui muitos pacotes populares do ML.

Além do pacote especificado nas seções a seguir, o Databricks Runtime 16.0 ML também inclui o seguinte pacote:

  • Hyperopt 0.2.7+db5
  • automl 1.29.0

Para reproduzir o ambiente Databricks Runtime ML Python em seu ambiente virtual local Python, download o arquivo requirements-16.0.txt e execute pip install -r requirements-16.0.txt. Esse comando instala toda a biblioteca de código aberto que o site Databricks Runtime ML usa, mas não instala a biblioteca desenvolvida pelo site Databricks, como databricks-automl, databricks-feature-engineering, ou o fork Databricks do site hyperopt.

Python biblioteca sobre clustering de CPU

Biblioteca

Versão

Biblioteca

Versão

Biblioteca

Versão

abl-py

1.0.0

acelerar

0,33,0

aiohttp

3.9.5

aiohttp-cors

0.7.0

sinal de áudio

1.2.0

alambique

1.13.3

tipos de anotações

0.7.0

anyio

4.2.0

arg completo

3.5.0

argônio-2-cffi

21,3,0

ligações argônio-2-cffi

21.2.0

flecha

1.2.3

pastor

0.8.1

asttokens

2.0.5

atunparse

1.6.3

async-lru

2.0.4

atrai

23.1,0

leitura de áudio

3.0.1

comando automático

2.2.2

núcleo do azure

1,31,0

azure-cosmos

4.3.1

azure-identity

1,18.0

azure-storage-blob

12,23.1

azure-storage-file-datalake

12,17.0

Babel

2.11.0

recuar

2.2.1

arquivo backports.tar

1.2.0

bcriptar

3.2.0

linda sopa 4

4.12.3

preto

24.4.2

cândida

4.1.0

pisca-pisca

1.7.0

blis

0,7.11

boto3

1,34,69

botocore

1,34,69

Brotli

1.0.9

ferramentas de cache

5.3.3

catálogo

2.0.10

codificadores de categoria

2.6.3

certifi

2024.6.2

caffi

1,16.0

chardet

4.0.0

normalizador de conjuntos de caracteres

2.0.4

disjuntor

2.0.0

clique

8.1.7

cloudpathlib

0.19.0

salmoura

2.2.1

cmdstanpy

1.2.4

colorido

0.5.6

registro de cores

6.8.2

comunicações

0.2.1

compositor

0,24,1

confecção

0.1.5

analisador de configuração

5.2.0

contornar

1.2.0

nome legal

2.2.0

criptografia

42,0.5

ciclador

0.11.0

cimem

2.0.8

Cython

3.0.11

dacite

1.8.1

databricks-automl-runtime

0.2.21

databricks-recurso-engenharia

0.7.0

databricks-sdk

0,30,0

conjunto de dados

2.20.0

dbl-tempo

0,1,26

dbus-Python

1.3.2

depurar

1.6.7

decorador

5.1.1

velocidade profunda

0,14.4

xml desfundido

0.7.1

Descontinuado

1.2.14

endro

0.3.8

distlib

0.3.8

árvore dm

0.1.8

docstring-to-markdown

0,11

pontos de entrada

0,4

avalie

0.4.2

execução

0,8.3

visão geral das facetas

1.1.1

Farama - Notificações

0.0.4

esquema fastjson

2.20.0

roda de texto rápida

0.9.2

bloqueio de arquivo

3.13.1

Frasco

2.2.5

tampões planos

24,3,25

ferramentas de fonte

4,51,0

fqdn

1.5.1

lista congelada

1.4.0

fsspec

2023,5,0

futuro

0,18.3

ímpeto

0.4.0

gitdb

4.0.11

GitPython

3.1.37

google-api-core

2.20.0

autenticação do Google

2.21,0

google-auth-oauthlib

1.0.0

google-cloud-core

2.4.1

Google Cloud Storage

2.10.0

google-crc32c

1.6.0

google-pasta

0.2.0

mídia retomável do Google

2.7.2

googleapis-common-protos

1,65,0

gala

3.5.0

Graphql-core

3.2.4

verdinha

3.0.1

grócio

1,60,0

status de grpcio

1,60,0

unicórnio

20.1.0

gviz-api

1.10.0

ginásio

0,28,1

h11

0.14.0

h5py

3.11.0

hijson

3.1.0

férias

0,54

html/min

0.1.12

httpcore

1.0.5

httplib2

0,20,4

httpx

0,27,2

abraçando o face-hub

0,24,5

Índia

3.7

Hash de imagem

4.3.1

image.io

2.33.1

aprendizado desequilibrado

0.12.3

importlib-metadados

6.0.0

importar lib_resources

6.4.5

inflexão

7.3.1

núcleo ipyflow

0,0.201

ipykernel

6,28,0

ipython

8,25,0

ipython-genutils

0.2.0

ipywidgets

7.7.2

isodato

0.6.1

isoduração

20.11.0

é perigoso

2.2.0

jaraco.context

5.3.0

jaraco.functools

4.0.1

jaraco.text

3.12.1

jax-jumpy

1.0.0

jedi

0.19.1

Jinja 2

3.1.4

tremose

0.5.0

jmespath

1.0.1

joblib

1.4.2

joblibspark

0.5.1

json 5

0.9.6

patch json

1,33

ponteiro json

3.0.0

esquema json

4.19.2

especificações do esquema json

2023,7,1

eventos jupyter

0.10.0

jupyter-lsp

2.2.0

jupyter_client

8.6.0

jupyter_core

5.7.2

servidor_jupyter

2.14.1

terminais_servidor_jupyter

0.4.4

JupyterLab

4.0.11

pigmentos jupyterlab

0.1.2

jupyterlab_server

2.25.1

Keras

3.5.0

solucionador de kiwi

1.4.4

cadeia de linguagens

0.2,12

núcleo do langchain-core

0,2,41

divisores de texto langchain

0.2.4

códigos de idioma

3.4.1

Langsmith

0,1,129

dados_de_idioma

1.2.0

launchpadlib

1.11.0

lazr.restfulclient

0,14.6

lazr.uri

1.0.6

lazy_loader

0,4

libclang

15.0.6.1

librosa

0.10.2

LightGBM

4.5.0

utilidades de iluminação

0,11.7

linkify-it-py

2.0.0

llvmlite

0,42,0

lz4

4.3.2

Mako

1.2.0

marisa trie

1.2.0

Markdown

3.4.1

markdown-it-py

2.2.0

MarkupSafe

2.1.3

Matplotlib

3.8.4

matplotlib-inline

0.1.6

mccabe

0.7.0

plugins mdit-py

0.3.0

mdurl

0.1.0

memória

1,14.0

confundir

2.0.4

tipos ml-d

0.4.1

malflow-skinny

2.15.1

mais ferramentas de iteração

10.3.0

mosaicml-CLI

0,6.41

mosaicml-transmissão

0,8.0

mpmath

1.3.0

refeição

1,31,0

extensões de msal

1.2.0

pacote de mensagens

1.1.0

multídito

6.0.4

multimétodo

1,12

multiprocesso

0,70,16

murmurar

1.0.10

mypy

1.10.0

extensões mypy

1.0.0

nomes

0,0.8

cliente nb

0,8.0

nbconvert

7.10.0

formato nb

5.9.2

nest-assíncio

1.6.0

redes

3.2.1

ninja

1.11.1.1

nltk

3.8.1

nodeenv

1.9.1

notebook

7.0.8

notebook_shim

0.2.3

numba

0,59,1

entorpecido

1.26.4

nvidia-ml-py

12,560,30

oauthlib

3.2.0

oci

2,135,0

openai

1,40,2

censo aberto

0,11.4

contexto de censo aberto

0.1.3

API de telemetria aberta

1.27.0

SDK de telemetria aberta

1.27.0

convenções semânticas de telemetria aberta

0,48b0

opt_ensum

3.4.0

optree

0.12.1

optuna

3.6.1

integração ideal

3.6.0

órfão

3.10.7

substituições

7.4.0

fazendo às malas

24,1

Pandas

1.5.3

filtros pandóicos

1.5.0

paramiko

3.4.0

parso

0,8.3

especificação do caminho

0.10.3

bode expiatório

0.5.6

esperar

4.8.0

phik

0.12.4

travesseiro

10.3.0

pip

24,2

platformdirs

3.10.0

Plotly

5,22,0

plugado

1.0.0

pmdarima

2.0.4

vira-lata

1.8.2

armário de portal

2.10.1

pressionado

3.0.9

cliente prometheus

0,14.1

kit de ferramentas de aviso

3,0,43

Prophet

1.1.5

proto-plus

1.24.0

protobuf

4.24.1

pistila

5.9.0

psycopg2

2.9.3

processo pty

0.7.0

avaliação pura

0.2.2

py-cpuinfo

9.0.0

espião

0,3,14

flecha

15,0.2

hotfix do pyarrow

0,6

pyasn1

0.4.8

módulos pyasn1

0.2.8

pybind11

2.13.6

piccolo

0,0,65

pycparser

2,21

pidântico

2.8.2

núcleo pirântico

2.20.1

flocos

3.2.0

Pigmentos

2.15.1

Objeto PYG

3,48,2

PyJWT

2.7.0

PyNaCL

1.5.0

pyodbc

5.0.1

PyOpenSSL

24,0,0

análise de pipa

3.0.9

direito autoral

1,1,294

pytesseract

0.3.10

Python-dateutil

2.9.0.post0

Python-editor

1.0.4

Python-JSON-logger

2.0.7

Python-lsp-jsonrpc

1.1.2

Python-lsp-server

1.10.0

Python-snappy

0.6.1

pytoolconfig

1.2.6

PyTorch-ranger

0.1.1

pytz

2024,1

PY Wavelets

1.5.0

PyYAML

6.0.1

pizma

25.1.2

questionário

1.10.0

raio

2.35,0

referência

0,30,2

regex

2023.10.3

pedidos

2.32.2

solicitações-oauthlib

1.3.1

validador rfc3339

0.1.4

validador rfc3986

0.1.1

rico

13.3.5

corda

1.12.0

rpds-py

0,10,6

rsa

4,9

ruamel.yaml

0,18.6

ruamel.yaml.clib

0.2.8

transferência s3

0.10.2

sensores de segurança

0.4.4

imagem scikit

0,23,2

scikit-learn

1.4.2

pegajoso

1.13.1

marítimo

0,13.2

Enviar 2 lixeiras

1.8.2

transformadores de frases

3.0.1

peça de frase

0.2.0

ferramentas de configuração

74,0,0

forma

0,46,0

shellingham

1.5.4

simplejson

3.17.6

seis

1,16.0

fatiador

0,0.8

aberto de forma inteligente

5.2.1

tapa

5.0.0

cheirar

1.3.0

arquivo de som

0.12.1

peneira

2,5

soxr

0.5.0.post1

espaçoso

3.7.5

legado espacial

3.0.12

registradores espaciais

1.0.5

Alquimia SQL

2.0.30

sqlparse

0.4.2

sensatamente

2.4.8

ID de importação ssh

5,11

dados de pilha

0.2.0

estanio

0.5.1

modelos de estatísticas

0,14.2

simpatia

1,12

tabular

0.9.0

emaranhado em unicode

0.2.0

tenacidade

8.2.2

TensorBoard

2.17.0

TensorBoard-servidor de dados

0.7.2

TensorBoard-perfil do plugin

2.17.0

TensorBoard X

2.6.2.2

TensorFlow

2.18.0

estimador de fluxo tensor

2.15.0

cor do termo

2.4.0

terminado

0,17.1

textual

0,81,0

tf_keras

2.17.0

uma coisa

8.2.5

threadpool ctl

2.2.0

arquivo tiff

2023,4,12

tiktoken

0.7.0

minúsculo css2

1.2.1

tokenizar-rt

4.2.1

tokenizadores

0.19.1

tomli

2.0.1

lanterna

2.4.0+CPU

otimizador de tocha

0.3.0

tocha

0.0.7

tochmetria

1.4.0.post0

visão de tocha

0.19.0+cpu

tornado

6.4.1

tqdm

4,66,4

almôndegas

5.14.3

transformadores

4,44,0

tipografia

4.3.0

digitar

0,12,5

tipos-protobuf

3.20.3

tipos - psutil

5.9.0

tipos-pytz

2023.3.1.1

Tipos - PyYAML

6.0.0

tipos de solicitações

2.31.0.0

ferramentas de configuração de tipos

68.0.0.0

tipos seis

1,16.0

tipos - urllib3

1.26.25.14

extensões_de digitação

4.11.0

uc-micro-py

1.0.1

junhão

5.10.0

atualizações autônomas

0,1

uri-padrão

1.3.0

urllib3

1,26,16

validadores

0,34,0

ambiente virtual

20.26.2

visões

0.7.5

wadlib

1.3.6

wasabi

1.1.3

largura do wc

0.2.5

doninha

0.4.1

cores da web

24,8,0

codificações da web

0.5.1

cliente websocket

1.8.0

websoquetes

11.0.3

Utilitário

3.0.3

qual é o patch

1.0.2

Python wheel

0,43,0

nuvem de palavras

1.9.3

embrulhar

1.14.1

xgboost

2.0.3

raio xgboost

0,1,19

xxhash

3.4.1

yapf

0,33,0

fio

1.9.3

criação de perfil de dados

4.9.0

zíper

3.17.0

std

1.5.5.1

Python biblioteca sobre clustering de GPU

Biblioteca

Versão

Biblioteca

Versão

Biblioteca

Versão

abl-py

1.0.0

acelerar

0,33,0

aiohttp

3.9.5

aiohttp-cors

0.7.0

sinal de áudio

1.2.0

tipos de anotações

0.7.0

anyio

4.2.0

arg completo

3.5.0

argônio-2-cffi

21,3,0

ligações argônio-2-cffi

21.2.0

flecha

1.2.3

pastor

0.8.1

asttokens

2.0.5

atunparse

1.6.3

async-lru

2.0.4

atrai

23.1,0

leitura de áudio

3.0.1

comando automático

2.2.2

núcleo do azure

1,31,0

azure-cosmos

4.3.1

azure-identity

1,18.0

azure-storage-blob

12,23.1

azure-storage-file-datalake

12,17.0

Babel

2.11.0

recuar

2.2.1

arquivo backports.tar

1.2.0

bcriptar

3.2.0

linda sopa 4

4.12.3

preto

24.4.2

cândida

4.1.0

pisca-pisca

1.7.0

blis

0,7.11

boto3

1,34,69

botocore

1,34,69

Brotli

1.0.9

ferramentas de cache

5.3.3

catálogo

2.0.10

codificadores de categoria

2.6.3

certifi

2024.6.2

caffi

1,16.0

chardet

4.0.0

normalizador de conjuntos de caracteres

2.0.4

disjuntor

2.0.0

clique

8.1.7

cloudpathlib

0.19.0

salmoura

2.2.1

cmdstanpy

1.2.4

colorido

0.5.6

registro de cores

6.8.2

comunicações

0.2.1

compositor

0,24,1

confecção

0.1.5

analisador de configuração

5.2.0

contornar

1.2.0

nome legal

2.2.0

criptografia

42,0.5

ciclador

0.11.0

cimem

2.0.8

Cython

3.0.11

dacite

1.8.1

databricks-automl-runtime

0.2.21

databricks-recurso-engenharia

0.7.0

databricks-sdk

0,30,0

conjunto de dados

2.20.0

dbl-tempo

0,1,26

dbus-Python

1.3.2

depurar

1.6.7

decorador

5.1.1

velocidade profunda

0,14.4

xml desfundido

0.7.1

Descontinuado

1.2.14

endro

0.3.8

distlib

0.3.8

árvore dm

0.1.8

docstring-to-markdown

0,11

einops

0,8.0

pontos de entrada

0,4

avalie

0.4.2

execução

0,8.3

visão geral das facetas

1.1.1

Farama - Notificações

0.0.4

esquema fastjson

2.20.0

roda de texto rápida

0.9.2

bloqueio de arquivo

3.13.1

flash_attn

2.5.6

Frasco

2.2.5

tampões planos

24,3,25

ferramentas de fonte

4,51,0

fqdn

1.5.1

lista congelada

1.4.0

fsspec

2023,5,0

futuro

0,18.3

ímpeto

0.4.0

gitdb

4.0.11

GitPython

3.1.37

google-api-core

2.20.0

autenticação do Google

2.21,0

google-auth-oauthlib

1.0.0

google-cloud-core

2.4.1

Google Cloud Storage

2.10.0

google-crc32c

1.6.0

google-pasta

0.2.0

mídia retomável do Google

2.7.2

googleapis-common-protos

1,65,0

gala

3.5.0

Graphql-core

3.2.4

verdinha

3.0.1

grócio

1,60,0

status de grpcio

1,60,0

unicórnio

20.1.0

gviz-api

1.10.0

ginásio

0,28,1

h11

0.14.0

h5py

3.11.0

hijson

3.1.0

férias

0,54

html/min

0.1.12

httpcore

1.0.5

httplib2

0,20,4

httpx

0,27,2

abraçando o face-hub

0,24,5

Índia

3.7

Hash de imagem

4.3.1

image.io

2.33.1

aprendizado desequilibrado

0.12.3

importlib-metadados

6.0.0

importar lib_resources

6.4.5

inflexão

7.3.1

núcleo ipyflow

0,0.201

ipykernel

6,28,0

ipython

8,25,0

ipython-genutils

0.2.0

ipywidgets

7.7.2

isodato

0.6.1

isoduração

20.11.0

é perigoso

2.2.0

jaraco.context

5.3.0

jaraco.functools

4.0.1

jaraco.text

3.12.1

jax-jumpy

1.0.0

jedi

0.19.1

Jinja 2

3.1.4

tremose

0.5.0

jmespath

1.0.1

joblib

1.4.2

joblibspark

0.5.1

json 5

0.9.6

patch json

1,33

ponteiro json

3.0.0

esquema json

4.19.2

especificações do esquema json

2023,7,1

eventos jupyter

0.10.0

jupyter-lsp

2.2.0

jupyter_client

8.6.0

jupyter_core

5.7.2

servidor_jupyter

2.14.1

terminais_servidor_jupyter

0.4.4

JupyterLab

4.0.11

pigmentos jupyterlab

0.1.2

jupyterlab_server

2.25.1

Keras

3.5.0

solucionador de kiwi

1.4.4

cadeia de linguagens

0.2,12

núcleo do langchain-core

0,2,41

divisores de texto langchain

0.2.4

códigos de idioma

3.4.1

Langsmith

0,1,129

dados_de_idioma

1.2.0

launchpadlib

1.11.0

lazr.restfulclient

0,14.6

lazr.uri

1.0.6

lazy_loader

0,4

libclang

15.0.6.1

librosa

0.10.2

LightGBM

4.5.0

utilidades de iluminação

0,11.7

linkify-it-py

2.0.0

llvmlite

0,42,0

lz4

4.3.2

Mako

1.2.0

marisa trie

1.2.0

Markdown

3.4.1

markdown-it-py

2.2.0

MarkupSafe

2.1.3

Matplotlib

3.8.4

matplotlib-inline

0.1.6

mccabe

0.7.0

plugins mdit-py

0.3.0

mdurl

0.1.0

memória

1,14.0

confundir

2.0.4

tipos ml-d

0.4.1

malflow-skinny

2.15.1

mais ferramentas de iteração

10.3.0

mosaicml-CLI

0,6.41

mosaicml-transmissão

0,8.0

mpmath

1.3.0

refeição

1,31,0

extensões de msal

1.2.0

pacote de mensagens

1.1.0

multídito

6.0.4

multimétodo

1,12

multiprocesso

0,70,16

murmurar

1.0.10

mypy

1.10.0

extensões mypy

1.0.0

nomes

0,0.8

cliente nb

0,8.0

nbconvert

7.10.0

formato nb

5.9.2

nest-assíncio

1.6.0

redes

3.2.1

ninja

1.11.1.1

nltk

3.8.1

nodeenv

1.9.1

notebook

7.0.8

notebook_shim

0.2.3

numba

0,59,1

entorpecido

1.26.4

nvidia-cublas-cu12

12,4.2.65

nvidia-cuda-cupti-cu12

12,4,99

nvidia-cuda-nvrtc-cu12

12,4,99

nvidia-cuda-runtime-cu12

12,4,99

nvidia-cudnn-cu12

9.1.0.70

nvidia-cufft-cu12

11.2.0.44

nvidia-curand-cu12

10.3.5.119

nvidia-cusolver-cu12

11.6.0.99

nvidia-cusparse-cu12

12.3.0.142

nvidia-ml-py

12,560,30

nvidia-nccl-cu12

2.20.5

nvidia-nvjitlink-cu12

12,4,99

nvidia-nvtx-cu12

12,4,99

oauthlib

3.2.0

oci

2,135,0

openai

1,40,2

censo aberto

0,11.4

contexto de censo aberto

0.1.3

API de telemetria aberta

1.27.0

SDK de telemetria aberta

1.27.0

convenções semânticas de telemetria aberta

0,48b0

opt_ensum

3.4.0

optree

0.12.1

optuna

3.6.1

integração ideal

3.6.0

órfão

3.10.7

substituições

7.4.0

fazendo às malas

24,1

Pandas

1.5.3

filtros pandóicos

1.5.0

paramiko

3.4.0

parso

0,8.3

especificação do caminho

0.10.3

bode expiatório

0.5.6

esperar

4.8.0

phik

0.12.4

travesseiro

10.3.0

pip

24,2

platformdirs

3.10.0

Plotly

5,22,0

plugado

1.0.0

pmdarima

2.0.4

vira-lata

1.8.2

armário de portal

2.10.1

pressionado

3.0.9

cliente prometheus

0,14.1

kit de ferramentas de aviso

3,0,43

Prophet

1.1.5

proto-plus

1.24.0

protobuf

4.24.1

pistila

5.9.0

psycopg2

2.9.3

processo pty

0.7.0

avaliação pura

0.2.2

py-cpuinfo

9.0.0

espião

0,3,14

flecha

15,0.2

hotfix do pyarrow

0,6

pyasn1

0.4.8

módulos pyasn1

0.2.8

pybind11

2.13.6

piccolo

0,0,65

pycparser

2,21

pidântico

2.8.2

núcleo pirântico

2.20.1

flocos

3.2.0

Pigmentos

2.15.1

Objeto PYG

3,48,2

PyJWT

2.7.0

PyNaCL

1.5.0

pyodbc

5.0.1

PyOpenSSL

24,0,0

análise de pipa

3.0.9

direito autoral

1,1,294

pytesseract

0.3.10

Python-dateutil

2.9.0.post0

Python-editor

1.0.4

Python-JSON-logger

2.0.7

Python-lsp-jsonrpc

1.1.2

Python-lsp-server

1.10.0

Python-snappy

0.6.1

pytoolconfig

1.2.6

PyTorch-ranger

0.1.1

pytz

2024,1

PY Wavelets

1.5.0

PyYAML

6.0.1

pizma

25.1.2

questionário

1.10.0

raio

2.35,0

referência

0,30,2

regex

2023.10.3

pedidos

2.32.2

solicitações-oauthlib

1.3.1

validador rfc3339

0.1.4

validador rfc3986

0.1.1

rico

13.3.5

corda

1.12.0

rpds-py

0,10,6

rsa

4,9

ruamel.yaml

0,18.6

ruamel.yaml.clib

0.2.8

transferência s3

0.10.2

sensores de segurança

0.4.4

imagem scikit

0,23,2

scikit-learn

1.4.2

pegajoso

1.13.1

marítimo

0,13.2

Enviar 2 lixeiras

1.8.2

transformadores de frases

3.0.1

peça de frase

0.2.0

ferramentas de configuração

74,0,0

forma

0,46,0

shellingham

1.5.4

simplejson

3.17.6

seis

1,16.0

fatiador

0,0.8

aberto de forma inteligente

5.2.1

tapa

5.0.0

cheirar

1.3.0

arquivo de som

0.12.1

peneira

2,5

soxr

0.5.0.post1

espaçoso

3.7.5

legado espacial

3.0.12

registradores espaciais

1.0.5

Alquimia SQL

2.0.30

sqlparse

0.4.2

sensatamente

2.4.8

ID de importação ssh

5,11

dados de pilha

0.2.0

estanio

0.5.1

modelos de estatísticas

0,14.2

simpatia

1,12

tabular

0.9.0

emaranhado em unicode

0.2.0

tenacidade

8.2.2

TensorBoard

2.17.0

TensorBoard-servidor de dados

0.7.2

TensorBoard-perfil do plugin

2.17.0

TensorBoard X

2.6.2.2

TensorFlow

2.18.0

estimador de fluxo tensor

2.15.0

cor do termo

2.4.0

terminado

0,17.1

textual

0,81,0

tf_keras

2.17.0

uma coisa

8.2.5

threadpool ctl

2.2.0

arquivo tiff

2023,4,12

tiktoken

0.7.0

minúsculo css2

1.2.1

tokenizar-rt

4.2.1

tokenizadores

0.19.1

tomli

2.0.1

lanterna

2.4.0+cu124

otimizador de tocha

0.3.0

tocha

0.0.7

tochmetria

1.4.0.post0

visão de tocha

0,19,0+cu124

tornado

6.4.1

tqdm

4,66,4

almôndegas

5.14.3

transformadores

4,44,0

tritão

3.0.0

tipografia

4.3.0

digitar

0,12,5

tipos-protobuf

3.20.3

tipos - psutil

5.9.0

tipos-pytz

2023.3.1.1

Tipos - PyYAML

6.0.0

tipos de solicitações

2.31.0.0

ferramentas de configuração de tipos

68.0.0.0

tipos seis

1,16.0

tipos - urllib3

1.26.25.14

extensões_de digitação

4.11.0

uc-micro-py

1.0.1

junhão

5.10.0

atualizações autônomas

0,1

uri-padrão

1.3.0

urllib3

1,26,16

validadores

0,34,0

ambiente virtual

20.26.2

visões

0.7.5

wadlib

1.3.6

wasabi

1.1.3

largura do wc

0.2.5

doninha

0.4.1

cores da web

24,8,0

codificações da web

0.5.1

cliente websocket

1.8.0

websoquetes

11.0.3

Utilitário

3.0.3

qual é o patch

1.0.2

Python wheel

0,43,0

nuvem de palavras

1.9.3

embrulhar

1.14.1

xgboost

2.0.3

raio xgboost

0,1,19

xxhash

3.4.1

yapf

0,33,0

fio

1.9.3

criação de perfil de dados

4.9.0

zíper

3.17.0

std

1.5.5.1

R biblioteca

A biblioteca R é idêntica à biblioteca R em Databricks Runtime 16.0.

Java e biblioteca ( 2.12 clustering) Scala Scala

Além de Java e Scala biblioteca em Databricks Runtime 16.0, Databricks Runtime 16.0 ML contém os seguintes JARs:

Agrupamento de CPU

ID do grupo

ID do artefato

Versão

com.typesafe.akka

também conhecido como actor_2.12

2.5.23

ml.dmlc

xgboost4j-spark_2.12

1.7.3

ml.dmlc

xgboost4j_2,12

1.7.3

org.graphframes

graphframes_2.12

0.8.4-db1-spark3,5

org.mlflow

cliente mlflow

2.15.1

org.tensorflow

spark-tensorflow-connector_2.12

1,15.0

Agrupamento de GPU

ID do grupo

ID do artefato

Versão

com.typesafe.akka

também conhecido como actor_2.12

2.5.23

ml.dmlc

xgboost4j-gpu_2,12

1.7.3

ml.dmlc

xgboost4j-spark-gpu_2.12

1.7.3

org.graphframes

graphframes_2.12

0.8.4-db1-spark3,5

org.mlflow

cliente mlflow

2.15.1

org.tensorflow

spark-tensorflow-connector_2.12

1,15.0