Pular para o conteúdo principal

Databricks Runtime 10,3 (EoS)

nota

O suporte para essa versão do Databricks Runtime foi encerrado. Para saber a data do fim do suporte, consulte Histórico do fim do suporte. Para conhecer todas as versões compatíveis do site Databricks Runtime, consulte Databricks Runtime notas sobre as versões e a compatibilidade.

As notas a seguir sobre a versão fornecem informações sobre Databricks Runtime 10.3 e Databricks Runtime 10.3 Photon, alimentado por Apache Spark 3.2.1. O Photon está em visualização pública. A Databricks lançou essa versão em fevereiro de 2022.

Novos recursos e melhorias​

Parquet e writers agora usam o fuso horário da sessão ao rebasear carimbos de data/hora em fonte de dados Avro Parquet​

Parquet e Avro agora usam o fuso horário da sessão ao rebasear o carimbo de data/hora no modo legacy em vez de usar o fuso horário default JVM . O fuso horário da sessão é definido como o fuso horário de JVM por default.

Novas funções no Spark SQL​

As seguintes funções do Spark SQL agora são suportadas nesta versão:

O Low shuffle merge já está disponível para todos​

O comando Delta MERGE INTO usa uma técnica chamada low shuffle merge , que reduz o embaralhamento de linhas não modificadas. Isso melhora o desempenho do comando e ajuda a preservar o clustering existente na mesa, como o Z-ordering. Essa funcionalidade foi introduzida no Databricks Runtime 9.0 para Public Preview e agora atingiu a disponibilidade geral. Para ativar o embaralhamento baixo merge, defina spark.databricks.delta.merge.enableLowShuffle como true. Veja Low shuffle merge em Databricks.

Novo COPY INTO recurso: modo de validação e evolução do esquema​

Modo de validação: COPY INTO agora suporta o modo VALIDATE em que os dados que devem ser carregados em uma tabela são validados, mas não gravados na tabela. Essas validações incluem:

  • Se os dados podem ser analisados.
  • Se o esquema corresponde ao da tabela ou se o esquema precisa ser evoluído.
  • Se todas as restrições de nulidade e verificação foram atendidas.

Exemplo de uso:

SQL
COPY INTO <table>
FROM <path-to-files>
FILEFORMAT = <format>
VALIDATE [ALL | <num-rows> ROWS]

O site default é para validar todos os dados que serão carregados. Você pode fornecer várias linhas para serem validadas com a palavra-chave ROWS, como VALIDATE 15 ROWS. A instrução COPY INTO retorna uma visualização prévia dos dados de 50 linhas ou menos, quando um número menor que 50 é usado com a palavra-chave ROWS).

evolução do esquema: COPY INTO agora suporta a evolução do esquema com a opção mergeSchema em COPY_OPTIONS. Para desenvolver o esquema de uma tabela, você deve ter as permissões OWN na tabela.

Exemplo de uso:

SQL
COPY INTO <table>
FROM <path-to-files>
FILEFORMAT = <format>
COPY_OPTIONS ('mergeSchema' = 'true')

Consulte COPY INTO.

As colunas de identidade agora são compatíveis com as tabelas Delta (visualização pública)​

O Delta Lake agora suporta colunas de identidade. Quando o senhor escreve em uma tabela Delta que define uma coluna de identidade e não fornece valores para essa coluna, o Delta agora atribui automaticamente um valor exclusivo e estatisticamente crescente ou decrescente. Consulte CREATE TABLE [USING].

Atualizações da biblioteca​

  • Atualizado Python biblioteca:

    • distlib de 0.3.3 a 0.3.4
    • filelock de 3.4.0 a 3.4.2
    • numpy de 1.19.2 a 1.20.1
    • plotly de 5.3.1 a 5.5.0

  • Biblioteca R atualizada:

    • backports de 1.4.0 a 1.4.1
    • brio a partir de 1.1.2 para 1.1.3
    • vassoura de 0.7.10 a 0.7.11
    • classe de 7,3-19 a 7,3-20
    • cpp11 de 0.4.1 a 0.4.2
    • DBI de 1.1.1 a 1.1.2
    • devtools de 2.4.2 a 2.4.3
    • resumo de 0.6.28 a 0.6.29
    • dtplyr a partir de 1.1.0 para 1.2.0
    • fansi de 0.5.0 a 1.0.2
    • estrangeiro de 0,8-81 a 0,8-82
    • fs de 1.5.0 a 1.5.2
    • vá de 1.4.3 para 1.5.0
    • cola de 1.5.0 a 1.6.0
    • httpuv de 1.6.3 a 1.6.5
    • jsonlite de 1.7.2 a 1.7.3
    • knitr de 1,36 a 1,37
    • MASS de 7,3-54 a 7,3-55
    • Matriz de 1,3-4 a 1,4-0
    • nome de 3,1-152 a 3,1-155
    • nnet de 7,3-16 a 7,3-17
    • openssl de 1.4.5 a 1.4.6
    • paralelamente de 1.29.0 a 1.30.0
    • pkgbuild de 1.2.0 a 1.3.1
    • pkgload de 1.2.3 a 1.2.4
    • progressor de 0.9.0 para 0.10.0
    • Rcpp de 1.0.7 a 1.0.8
    • leitor a partir de 2.1.0 para 2.1.1
    • remotos de 2.4.1 a 2.4.2
    • RSQLite de 2.2.8 a 2.2.9
    • informações da sessão de 1.2.1 a 1.2.2
    • Sparklyr da versão 1.7.2 para a 1.7.4
    • testthat a partir da versão 3.1.0 para 3.1.1
    • tinytex de 0,35 a 0,36
    • use isso a partir de 2.1.3 para 2.1.5
    • vroom de 1.5.6 a 1.5.7
    • com de 2.4.2 a 2.4.3
    • xfun de 0,28 a 0,29
    • xml2 de 1.3.2 a 1.3.3

  • Atualizado Java biblioteca:

    • dev.ludovic.netlib.arpack de 1.3.2 a 2.2.1
    • dev.ludovic.netlib.blas de 1.3.2 a 2.2.1
    • dev.ludovic.netlib.lapack de 1.3.2 a 2.2.1
    • io.delta.delta-compartilhamento-spark_2.12 de 0.2.0 para 0.3.0

Apache Spark​

O Databricks Runtime 10.3 inclui o Apache Spark 3.2.1. Esta versão inclui todas as correções e melhorias do Spark incluídas no Databricks Runtime 10.2 (EoS), bem como as seguintes correções de bugs e melhorias adicionais feitas no Spark:

  • [SPARK-37896] [SQL] Implemente um ConstantColumnVector e melhore o desempenho dos metadados de arquivos ocultos
  • [SPARK-37924] [SQL] Classifica as propriedades da tabela por key em SHOW CREATE TABLE na VIEW (v1)
  • [SPARK-37636] [SQL] Migrar o CREATE NAMESPACE para usar o comando V2 por default
  • [SPARK-37381] [SQL] Unificar testes v1 e v2 SHOW CREATE TABLE
  • [SPARK-37876] [CORE] [sql] Mova SpecificParquetRecordReaderBase.listDirectory para TestUtils
  • [SPARK-37854] [CORE] Substituir a verificação de tipo por correspondência de padrão no código do Spark
  • [SPARK-36967] [CORE] Relate o tamanho preciso do bloco aleatório se estiver inclinado
  • [SPARK-37864] [SQL] Suporte a valores booleanos de leitura vetorizada, uso de codificação RLE com Parquet DataPage V2
  • [SPARK-37862] [SQL] O RecordBinaryComparator deve pular rapidamente a verificação de alinhamento com a plataforma não alinhada
  • [SPARK-37855] [SQL] IllegalStateException ao transformar uma matriz dentro de um struct aninhado
  • [SPARK-37858] [SQL] Lançar SparkRuntimeException com classes de erro das funções AES
  • [SPARK-37841] [SQL] O BasicWriteTaskStatsTracker não deve tentar obter o status de um arquivo ignorado
  • [SPARK-37860] [UI] Corrigir o índice da tarefa na linha do tempo do evento da tarefa da página do estágio
  • [SPARK-36879] [SQL] Suporte à codificação de página de dados Parquet v2 (DELTA_BINARY_PACKED) para o caminho vetorizado
  • [SPARK-37828] [SQL] Empurrar filtros para baixo por meio do RebalancePartitions
  • [SPARK-37802] [SQL][3.2] O nome do campo composto deve funcionar com o push down agregado
  • [SPARK-37826] [SQL] Usar o nome do codec zstd nos nomes dos arquivos ORC para o implante hive orc
  • [SPARK-37820] [SQL] Substituir ApacheCommonBase64 por JavaBase64 para funções de strings
  • [SPARK-37832] [SQL] O conversor de estrutura Orc deve usar uma matriz para procurar conversores de campo em vez de uma lista vinculada
  • [SPARK-37786] [SQL] O suporte a StreamingQueryListener usa SQLConf.get para obter o SQLConf do SessionState correspondente.
  • [SPARK-37527] [SQL] Traduzir mais funções agregadas padrão para pushdown
  • [SPARK-37777] [SQL] Atualizar a sintaxe SQL de SHOW FUNCTIONS
  • [SPARK-8582] [CORE] Passe o ponto de verificação ansiosamente quando solicitado a fazer isso de verdade
  • [SPARK-37822] [SQL] StringSplit deve retornar uma matriz com elementos não nulos
  • [SPARK-37812] [SQL] Ao desserializar uma estrutura Orc, reutilize a linha de resultado quando possível
  • [SPARK-37367] [SQL] Reabilitar o teste de exceção em DDLParserSuite.create view - basic
  • [SPARK-37796] [SQL] ByteArrayMethods arrayEquals deve pular rapidamente a verificação de alinhamento com a plataforma não alinhada
  • [SPARK-37817] [SQL][minor] Remover código inacessível em complexTypeExtractors.Scala
  • [SPARK-37807] [SQL] Corrigir um erro de digitação na mensagem HttpAuthenticationException
  • [SPARK-37750] [SQL] Modo ANSI: opcionalmente, retornar resultado nulo se o elemento não existir na matriz/mapa
  • [SPARK-37789] [SQL] Adicionar uma classe para representar funções agregadas gerais no DS V2
  • [SPARK-37785] [SQL][core] Adicionar Utils.isInRunningSparkTask
  • [SPARK-37780] [SQL] Suporte a QueryExecutionListener: use SQLConf.get para obter o SQLConf do SessionState correspondente
  • [SPARK-37783] [SS] [sql] [CORE] Habilite a recursão de cauda sempre que possível
  • [SPARK-37726] [SQL] Adicionar métricas de tamanho de derramamento para classificar merge join
  • [SPARK-37800] [SQL] TreeNode.argString formata incorretamente argumentos do tipo Set[_]
  • [SPARK-37716] [SQL] Melhorar as mensagens de erro quando um LateralJoin tiver expressões não determinísticas
  • [SPARK-37779] [SQL] Tornar o plano ColumnarToRowExec canonizável após a (des)serialização
  • [SPARK-37578] [SQL] Atualizar tarefa métricas do ds v2 custom métricas
  • [SPARK-37676] [SQL] Suporte à função de agregação ANSI: percentile_cont
  • [SPARK-37724] [SQL] Modo ANSI: desabilite as palavras-chave reservadas do ANSI por default
  • [SPARK-37705] [SQL][3.2] Rebase de timestamps no fuso horário da sessão salvo nos metadados do Parquet/Avro
  • [SPARK-34755] [SQL] Suporte aos utilitários para o formato de número de transformação
  • [SPARK-36703] [SQL] Remover o Sort se ele for filho do RepartitionByExpression
  • [SPARK-37369] [SQL] Evite a transição redundante ColumnarToRow no InMemoryTableScan
  • [SPARK-37450] [SQL] Eliminar campos desnecessários do Generate
  • [SPARK-37728] [SQL] A leitura de colunas aninhadas com o leitor vetorizado ORC pode causar ArrayIndexOutOfBoundsException
  • [SPARK-37564] [SQL] Adicionar code-gen para classificar agregados sem chave de agrupamento
  • [SPARK-37659] [UI] [3.2] Correção da condição de corrida do FsHistoryProvider entre list e delet log info
  • [SPARK-37727] [SQL] Show ignored confs & hide warnings for conf already set in SparkSession.builder.getOrCreate
  • [SPARK-37391] [SQL]JdbcConnectionProvider informa se modifica o contexto de segurança
  • [SPARK-37273] [SQL] Suporte a colunas de metadados de arquivos ocultos no Spark SQL
  • [SPARK-36876] [SQL] Suporte à poda de partição dinâmica para HiveTableScanExec
  • [SPARK-37546] [SQL] O comando ReplaceTableAsSelect da V2 deve qualificar o local
  • [SPARK-37545] [SQL] O comando V2 CreateTableAsSelect deve qualificar o local
  • [SPARK-37707] [SQL] Permitir atribuição de armazenamento e conversão implícita entre tipos de data e hora
  • [SPARK-37644] [SQL] Suporte a pushdown de agregado completo de fonte de dados v2
  • [SPARK-37695] [CORE][shuffle] Ignorar diagnóstico de blocos de mesclagem do shuffle baseado em push
  • [SPARK-35295] [ML] Substituir totalmente com.github.fommil.netlib por dev.ludovic.netlib:2.0
  • [SPARK-37694] [SQL] Não permitir a exclusão de recurso no spark sql CLI
  • [SPARK-37330] [SQL] Migrar ReplaceTableStatement para o comando v2
  • [SPARK-27974] [SQL] Suporte à função agregada ANSI: array_agg
  • [SPARK-36902] [SQL] Migrar CreateTableAsSelectStatement para o comando v2
  • [SPARK-37678] [Python] Corrigir a assinatura _cleanup_and_return
  • [SPARK-37613] [SQL] Suporte à função agregada ANSI: regr_count
  • [SPARK-37689] [SQL] A expansão deve ser suportada em PropagateEmptyRelation
  • [SPARK-37654] [SQL] Corrigir NPE em Row.getSeq quando o campo é nulo
  • [SPARK-37496] [SQL] Migrar ReplaceTableAsSelectStatement para o comando v2
  • [SPARK-37483] [SQL] Suporte push down top N to JDBC fonte de dados V2
  • [SPARK-37577] [SQL] Corrigir ClassCastException: ArrayType não pode ser convertido em StructType para Generate Pruning
  • [SPARK-37310] [SQL] Migrar ALTER NAMESPACE ... SET PROPERTIES para usar o comando V2 by default
  • [SPARK-37501] [SQL] CREATE/REPLACE TABLE deve qualificar o local para o comando v2
  • [SPARK-37343] [SQL] Implementar createIndex, IndexExists e dropIndex em JDBC (dialeto Postgres)
  • [SPARK-37060] [NÚCLEO] [3,2] Gerencie a resposta do status do driver dos mestres de backup
  • [SPARK-37629] [SQL] Acelerar Expression.canonicalized
  • [SPARK-37633] [SQL] O Unwrap cast deve ser ignorado se o downcast falhar com um...
  • [SPARK-37631] [SQL] Limpeza de código na promoção de strings para tipo duplo em funções matemáticas
  • [SPARK-37569] [SQL] Não marque os campos view aninhados como anuláveis
  • [SPARK-37557] [SQL] Substituir hash de objeto por agregado de classificação se o filho já estiver classificado
  • [SPARK-36850] [SQL] Migrar CreateTableStatement para a estrutura de comando v2
  • [SPARK-37592] [SQL] Melhorar o desempenho de JoinSelection
  • [SPARK-37217] [SQL] O número de partições dinâmicas deve ser verificado antecipadamente ao gravar em tabelas externas
  • [SPARK-37584] [SQL] Nova função SQL: map_contains_key
  • [SPARK-37455] [SQL] Substituir o hash pelo agregado de classificação se o filho já estiver classificado
  • [SPARK-34735] [SQL][ui] Adicionar configurações modificadas para execução de SQL na interface do usuário
  • [SPARK-37540] [SQL] Detectar mais viagens do tempo sem suporte
  • [SPARK-37376] [SQL] Introduzir uma nova interface HasPartitionKey do DataSource V2
  • [SPARK-37666] [SQL] Defina GCM como o modo default em aes_encrypt()/aes_decrypt()
  • [SPARK-37573] [SQL] O IsolatedClientLoader deve usar como fallback a versão relacionada, nem sempre o hadoop-2.7.4
  • [SPARK-37561] [SQL] Evite carregar todas as funções ao obter o DelegationToken do hive
  • [SPARK-37370] [SQL] Adicionar SQL configs para controlar o recém-adicionado join code-gen na versão 3.3
  • [SPARK-37311] [SQL] Migrar ALTER NAMESPACE ... SET LOCATION para usar o comando V2 by default
  • [SPARK-37192] [SQL] Migrar SHOW TBLPROPERTIES para usar o comando V2 by default
  • [SPARK-37219] [SQL] Adicionar suporte à sintaxe AS OF
  • [SPARK-37316] [SQL] Adicionar código de geração para a classificação de existência merge join
  • [SPARK-37591] [SQL] Suporte ao modo GCM em aes_encrypt()/aes_decrypt()
  • [SPARK-37586] [SQL] Adicione os argumentos mode e padding a aes_encrypt()/aes_decrypt()
  • [SPARK-12567] [SQL] Adicionar funções internas aes_encrypt e aes_decrypt
  • [SPARK-37392] [SQL] Corrigir o erro de desempenho ao inferir restrições para Generate
  • [SPARK-37481] [Core] [webui] Corrige o desaparecimento de estágios ignorados após eles tentarem novamente
  • [SPARK-37533] [SQL] Nova função SQL: try_element_at
  • [SPARK-37451] [SQL] Corrigir a conversão do tipo strings para o tipo decimal se spark.sql.legacy.allowNegativeScaleOfDecimal estiver ativado
  • [SPARK-37062] [SS] Introduzir uma nova fonte de dados para fornecer um conjunto consistente de linhas por microbatch
  • [SPARK-37552] [SQL] Adicionar a função convert_timezone()
  • [SPARK-37555] [SQL] spark-sql deve passar o último comentário não fechado para o backend
  • [SPARK-37286] [SQL] Mover compileAggregates de JDBCRDD para JdbcDialect
  • [SPARK-37485] [CORE] [sql] Substitua map por expressões que não produzem nenhum resultado com foreach
  • [SPARK-37556] [SQL] Falha na classe Deser void com serialização Java
  • [SPARK-37520] [SQL] Adicionar as funções de strings startswith() e endswith()
  • [SPARK-37471] [SQL] suporte spark-sql ; em comentários entre colchetes aninhados
  • [SPARK-37360] [SQL] Suporte TimestampNTZ em JSON fonte de dados
  • [SPARK-37508] [SQL] Adicionar a função de strings CONTAINS()
  • [SPARK-37494] [SQL] Unificar a saída das opções v1 e v2 do comando SHOW CREATE TABLE
  • [SPARK-37524] [SQL] Devemos eliminar todas as tabelas após testar a poda de partição dinâmica.
  • [SPARK-37389] [SQL] Verificar comentários entre colchetes não fechados
  • [SPARK-37220] [SQL] Não dividir o arquivo de entrada para o leitor Parquet com push down agregado
  • [SPARK-37326] [SQL] Suporte TimestampNTZ em CSV fonte de dados
  • [SPARK-35867] [SQL] Habilitar leitura vetorizada para VectorizedPlainValuesReader.readBooleans
  • [SPARK-37484] [CORE] [sql] Substitua get e getOrElse por getOrElse
  • [SPARK-37492] [SQL] Otimizar o código de teste do Orc com withAllNativeOrcReaders
  • [SPARK-37458] [SS] Remova serializeFromObject desnecessário do plano de ForEachBatch

Atualizações de manutenção​

Consulte as atualizações de manutenção do Databricks Runtime 10.3.

Ambiente do sistema​

  • Sistema operacional : Ubuntu 20.04.3 LTS
  • Java : Zulu 8.56.0.21-CA-linux64
  • Scala : 2.12.14
  • Python : 3.8.10
  • R : 4.1.2
  • Delta Lake : 1.1.0

Instalado Python biblioteca​

Biblioteca

Versão

Biblioteca

Versão

Biblioteca

Versão

Antergos Linux

2015.10 (versão ISO)

apronta

1.4.4

argônio-2-cffi

20.1.0

gerador assíncrono

1,10

atrai

20,3,0

chamada de volta

0.2.0

bidita

0,21,4

cândida

3.3.0

boto3

1,16.7

botocore

1.19,7

certifi

2020.12,5

caffi

1,14.5

chardet

4.0.0

ciclador

0.10.0

Cython

0,29,23

dbus-Python

1.2.16

decorador

5.0.6

xml desfundido

0.7.1

distlib

0.3.4

informação da distribuição

0,23 ubuntu 1

pontos de entrada

0,3

visão geral das facetas

1.0.0

bloqueio de arquivo

3.4.2

Índia

2,10

ipykernel

5.3.4

ipython

7.22,0

ipython-genutils

0.2.0

ipywidgets

7.6.3

jedi

0,17.2

Jinja 2

2.11.3

jmespath

0.10.0

joblib

1.0.1

esquema json

3.2.0

cliente jupyter

6.1.12

núcleo jupyter

4.7.1

pigmentos jupyterlab

0.1.2

widgets jupyterlab

1.0.0

solucionador de kiwi

1.3.1

coalas

1.8.2

MarkupSafe

2.0.1

Matplotlib

3.4.2

confundir

0,8.4

cliente nb

0.5.3

nbconvert

6.0.7

formato nb

5.1.3

nest-assíncio

1.5.1

notebook

6.3.0

entorpecido

1.20.1

fazendo às malas

20,9

Pandas

1.2.4

filtros pandóicos

1.4.3

parso

0.7.0

bode expiatório

0.5.1

esperar

4.8.0

picles

0.7.5

Travesseiro

8.2.0

pip

21.0.1

Plotly

5.5.0

cliente prometheus

0.10.1

kit de ferramentas de aviso

3.0.17

protobuf

3.17.2

psycopg2

2.8.5

processo pty

0.7.0

flecha

4.0.0

pycparser

2,20

Pigmentos

2.8.1

Objeto PYG

3,36,0

análise de pipa

2.4.7

persistente

0,17.3

Python-apt

2.0.0+ubuntu0.20.4.6

Python-dateutil

2.8.1

Python-engineio

4.3.0

Python-socketio

5.4.1

pytz

2020,5

pizma

20.0.0

pedidos

2.25.1

solicitações - soquete unix

0.2.0

transferência s3

0.3.7

scikit-learn

0,24,1

pegajoso

1.6.2

marítimo

0.11.1

Enviar 2 lixeiras

1.5.0

ferramentas de configuração

52,0,0

seis

1,15.0

ID de importação ssh

5,10

modelos de estatísticas

0.12.2

tenacidade

8.0.1

terminado

0.9.4

caminho de teste

0.4.4

threadpool ctl

2.1.0

tornado

6.1

almôndegas

5.0.5

atualizações autônomas

0,1

urllib3

1,25.11

ambiente virtual

20.4.1

largura do wc

0.2.5

codificações da web

0.5.1

Python wheel

0,36,2

extensão widgetsnb

3.5.1

Instalada a R biblioteca​

As bibliotecas R são instaladas a partir do Snapshot Microsoft CRAN em 2022-01-19.

Biblioteca

Versão

Biblioteca

Versão

Biblioteca

Versão

askpass

1.1

afirme que

0.2.1

portas traseiras

1.4.1

base

4.1.2

base64enc

0,1-3

pouco

4.0.4

bit64

4.0.5

bolha

1.2.2

inicialização

1,3-28

fermentar

1,0-6

brio

1.1.3

vassoura

0,7.11

babião

0.3.1

cachem

1.0.6

chamador

3.7.0

cursor

6,0-90

guarda de celas

1.1.0

crono

2,3-56

Aula

7,3-20

CLIPE

3.1.0

clipe

0.7.1

Cluster

2.1.2

ferramentas de código

0,2-18

espaço de cores

2,0-2

marca comum

1.7

compilador

4.1.2

configuração

0.3.1

cpp11

0.4.2

giz de cera

1.4.2

Credenciais

1.3.2

cacho

4.3.2

data.tabela

1.14.2

conjunto de dados

4.1.2

DBI

1.1.2

dbplyr

2.1.1

desc

1.4.0

ferramentas de desenvolvimento

2.4.3

diff

0.3.5

digerir

0,6.29

dplyr

1.0.7

dtplyr

1.2.0

e1071

1,7-9

reticências

0.3.2

avalie

0,14

fansi

1.0.2

colorista

2.1.0

mapa rápido

1.1.0

fontawesome

0.2.2

para gatos

0.5.1

para cada um

1.5.1

estrangeira

0,8-82

forjar

0.2.0

fs

1.5.2

futuro

1,23,0

futuro.aplique

1.8.1

gargarejar

1.2.0

genéricas

0.1.1

obter

1.5.0

ggplot2

3.3.5

gh

1.3.0

gitcreds

0.1.1

glmnet

4,1-3

globais

0.14.0

cola

1.6.0

google drive

2.0.0

planilhas do Google 4

1.0.0

goleiro

0.2.2

gráficos

4.1.2

Dispositivos GR

4.1.2

grade

4.1.2

Grid Extra

2.3

gsubfn

0,7

mesa

0.3.0

refúgio

2.4.3

mais alto

0,9

HMS

1.1.1

ferramentas html

0.5.2

widgets html

1.5.4

http.uv

1.6.5

httr

1.4.2

escritor

1.3.2

HWriter Plus

1,0-3

IDs

1.0.1

mini

0.3.1

ipred

0,9-12

isóbanda

0.2.5

iteradores

1,0.13

jquerylib

0.1.4

jsonlite

1.7.3

Kern Smooth

2,23-20

tricotar

1,37

rótulo

0.4.2

posteriormente

1.3.0

treliça

0,20-45

lava

1.6.10

ciclo de vida

1.0.1

ouvindo

0,8.0

lubrificar

1.8.0

magritter

2.0.1

Markdown

1.1

MASSA

7,3-55

Matriz

1,4-0

memoise

2.0.1

métodos

4.1.2

mgcv

1,8-38

mímica

0,12

Métricas do modelo

1.2.2.2

modelar

0.1.8

munsell

0.5.0

nome

3,1-155

net

7,3-17

Número Deriv

2016,8-1,1

openssl

1.4.6

paralelo

4.1.2

paralelamente

1.30,0

pilar

1.6.4

pkgbuild

1.3.1

pkgconfig

2.0.3

carregamento de pacotes

1.2.4

plogr

0.2.0

plyr

1.8.6

elogio

1.0.0

unidades bonitas

1.1.1

ProC

1,18.0

processa

3.5.2

prodlim

13/11/2019

progresso

1.2.2

progressista

0.10.0

promessas

1.2.0.1

proto

1.0.0

proxy

0,4-26

ps

1.6.0

ronronar

0.3.4

r2d3

0.2.5

R6

2.5.1

Floresta aleatória

4,6-14

corredeiras

0.3.3

rcmdcheck

1.4.0

Cervejaria RColor

1,1-2

Rcpp

1,0.8

RCP Pegen

0.3.3.9.1

leitor

2.1.1

readxl

1.3.1

receitas

0,1,17

revanche

1.0.1

revanche 2

2.1.2

controles remotos

2.4.2

reprex

2.0.1

remodelar 2

1.4.4

rlang

0.4.12

rmarkdown

2,11

RODBC

1,3-19

roxigênio2

7.1.2

rpartem

4,1-15

rprojroot

2.0.2

Reservar

1,8-10

RSQLite

2.2.9

API do estúdio

0,13

reversões

2.1.1

colete

1.0.2

atrevimento

0.4.0

escala

1.1.1

seletor

0,4-2

informações da sessão

1.2.2

forma

1.4.6

brilhante

1.7.1

ferramentas de origem

0.1.7

Sparklyr

1.7.4

SparkR

3.2.0

espacial

7,3-11

splines

4.1.2

sqldf

0,4-11

QUADRADO

2021,1

estatísticas

4.1.2

estatísticas4

4.1.2

stringi

1.7.6

longarina

1.4.0

sobrevivência

3,2-13

diz

3.4

tcltk

4.1.2

Demonstrações de ensino

2,10

teste isso

3.1.1

petiscar

3.1.6

arrumado

1.1.4

seleção arrumada

1.1.1

tidyverso

1.3.1

Hora/Data

3043,102

tinytex

0,36

Ferramentas

4.1.2

tzdb

0.2.0

use isso

2.1.5

utf 8

1.2.2

utilidades

4.1.2

uuid

1,0-3

vctrs

0.3.8

Viridis Lite

0.4.0

vadouro

1.5.7

waldo

0.3.1

bigode

0,4

murchar

2.4.3

diversão

0,29

xml2

1.3.3

xopen

1.0.0

x estável

1,8-4

yaml

2.2.1

compactar

2.2.0

Instalei Java e Scala biblioteca (versão de clusteringScala 2.12)​

ID do grupo

ID do artefato

Versão

chifre

chifre

2.7.7

com.amazonaws

Amazon-kinesis-client

1.12.0

com.amazonaws

aws-java-sdk-autoscale

1,11.655

com.amazonaws

formação de nuvem aws-java-sdk

1,11.655

com.amazonaws

aws-java-sdk-cloudfront

1,11.655

com.amazonaws

aws-java-sdk-cloudhsm

1,11.655

com.amazonaws

aws-java-sdk-cloudsearch

1,11.655

com.amazonaws

aws-java-sdk-cloudtrail

1,11.655

com.amazonaws

aws-java-sdk-cloudwatch

1,11.655

com.amazonaws

métricas aws-java-sdk-cloudwatch

1,11.655

com.amazonaws

aws-java-sdk-codedeploy

1,11.655

com.amazonaws

identidade cognitiva aws-java-sdk

1,11.655

com.amazonaws

aws-java-sdk-cognitosync

1,11.655

com.amazonaws

aws-java-sdk-config

1,11.655

com.amazonaws

aws-java-sdk-core

1,11.655

com.amazonaws

pipeline de dados aws-java-sdk

1,11.655

com.amazonaws

aws-java-sdk-conexão direta

1,11.655

com.amazonaws

diretório aws-java-sdk

1,11.655

com.amazonaws

aws-java-sdk-dynamodb

1,11.655

com.amazonaws

aws-java-sdk-ec2

1,11.655

com.amazonaws

aws-java-sdk-ecs

1,11.655

com.amazonaws

aws-java-sdk-efs

1,11.655

com.amazonaws

aws-java-sdk-elasticache

1,11.655

com.amazonaws

aws-java-sdk-elasticbeanstalk

1,11.655

com.amazonaws

balanceamento de carga elástico aws-java-sdk

1,11.655

com.amazonaws

transcodificador elástico aws-java-sdk-

1,11.655

com.amazonaws

aws-java-sdk-emr

1,11.655

com.amazonaws

aws-java-sdk-glacier

1,11.655

com.amazonaws

aws-java-sdk-glue

1,11.655

com.amazonaws

aws-java-sdk-iam

1,11.655

com.amazonaws

aws-java-sdk-importação/exportação

1,11.655

com.amazonaws

aws-java-sdk-kinesis

1,11.655

com.amazonaws

aws-java-sdk-kms

1,11.655

com.amazonaws

aws-java-sdk-lambda

1,11.655

com.amazonaws

aws-java-sdk-logs

1,11.655

com.amazonaws

aws-java-sdk - aprendizado de máquina

1,11.655

com.amazonaws

aws-java-sdk-opsworks

1,11.655

com.amazonaws

aws-java-sdk-rds

1,11.655

com.amazonaws

aws-java-sdk-redshift

1,11.655

com.amazonaws

aws-java-sdk-route53

1,11.655

com.amazonaws

aws-java-sdk-s3

1,11.655

com.amazonaws

aws-java-sdk-ses

1,11.655

com.amazonaws

aws-java-sdk-simpledb

1,11.655

com.amazonaws

aws-java-sdk - fluxo de trabalho simples

1,11.655

com.amazonaws

aws-java-sdk-sns

1,11.655

com.amazonaws

aws-java-sdk-sqs

1,11.655

com.amazonaws

aws-java-sdk-ssm

1,11.655

com.amazonaws

gateway de armazenamento aws-java-sdk

1,11.655

com.amazonaws

aws-java-sdk-sts

1,11.655

com.amazonaws

suporte aws-java-sdk

1,11.655

com.amazonaws

aws-java-sdk-swf-biblioteca

1.11.22

com.amazonaws

aws-java-sdk-workspace

1,11.655

com.amazonaws

jmespath-java

1,11.655

com.chuusai

sem forma_2.12

2.3.3

com.clearspring.analítica

transmissão

2.9.6

com.databricks

Reservar

1,8-3

com.databricks

jets3t

0.7.1-0

com.databricks.scalapb

plugin_2.12 do compilador

0,4,15-10

com.databricks.scalapb

scalapb-runtime_2.12

0,4,15-10

com.esotérico software

crio-sombreado

4.0.2

com.esotérico software

minlog

1.3.0

com.fasterxml

colega de classe

1.3.4

com.fasterxml.jackson.core

jackson-anotação

2.12.3

com.fasterxml.jackson.core

jackson-core

2.12.3

com.fasterxml.jackson.core

vinculação de dados jackson

2.12.3

formato de dados com.fasterxml.jackson.

formato de dados jackson-cbor

2.12.3

com.fasterxml.jackson.tipo de dados

jackson-datatype-joda

2.12.3

com.fasterxml.jackson.module

parâmetro do módulo jackson

2.12.3

com.fasterxml.jackson.module

jackson-module-Scala.12

2.12.3

com.github.ben-manes.cafeína

cafeína

2.3.4

com.github.fommil

descarregador

1.1

com.github.fommil.netlib

abdômen

1.1.2

com.github.fommil.netlib

native_ref-java

1.1

com.github.fommil.netlib

native_ref-java-nativos

1.1

com.github.fommil.netlib

sistema_nativo-java

1.1

com.github.fommil.netlib

native_system-java-natives

1.1

com.github.fommil.netlib

netlib-native_ref-linux-x86_64-natives

1.1

com.github.fommil.netlib

netlib-native_system-linux-x86_64-natives

1.1

com.github.luben

zstd-jni

1,5,0-4

com.github.wendykierp

JTransforma

3.1

com.google.code.findbugs

jsr305

3.0.0

com.google.code.gson

gson

2.8.6

com.google.crypto.tink

eu acho

1.6.0

com.google.flatbuffers

tampões planos-java

1.9.0

com.google.goiaba

goiaba

15,0

com.google.protobuf

protobuf-java

2.6.1

banco de dados com.h2

h2

1,4,195

com.helger

perfilador

1.1.1

com.jcraft

jsch

0,1,50

com.jolbox

bonecp

VERSÃO 0.8.0.

com.lihaoyi

código-fonte_2.12

0.1.9

com.microsoft.azure

azure-data lake-store-sdk

2.3.9

com.microsoft.sqlserver

mssql-JDBC

9.2.1. jre8

comendo

comprimir-lzf

1.0.3

com.sun.istack

istack-commons-runtime

3.0.8

com.sun.mail

javax.mail

1.5.2

com.trunning

JSON

1,8

com.thoughtworks.paranamer

paranâmero

2.8

com.trueaccord.lenses

lentes_2.12

0.4.12

com.Twitter

chill-java

0.10.0

com.Twitter

chill_2.12

0.10.0

com.Twitter

util-app_2.12

7.1.0

com.Twitter

util-core_2.12

7.1.0

com.Twitter

função-útil_2.12

7.1.0

com.Twitter

util-jvm_2.12

7.1.0

com.Twitter

util-lint_2.12

7.1.0

com.Twitter

util-registry_2.12

7.1.0

com.Twitter

util-stats_2.12

7.1.0

com.typesafe

configuração

1.2.1

com.typesafe.Scala-logging

Scala-logging_2.12

3.7.2

com.univocidade

analisadores de univocidade

2.9.1

com.zaxxer

HikaricP

4.0.3

comum-CLI

comum-CLI

1.2

codec comum

codec comum

1,15

coleções comuns

coleções comuns

3.2.2

commons-dbcp

commons-dbcp

1.4

upload de arquivo commons

upload de arquivo commons

1.3.3

commons-httpclient

commons-httpclient

3.1

commons-io

commons-io

2.8.0

linguagem comum

linguagem comum

2.6

registro de bens comuns

registro de bens comuns

1.1.3

commons-net

commons-net

3.1

comum-pool

comum-pool

1.5.4

dev.ludovic.netlib

mochila

2.2.1

dev.ludovic.netlib

blás

2.2.1

dev.ludovic.netlib

lapack

2.2.1

hive-2.3__hadoop-3.2

jets3t-0.7

liball_deps_2,12

info.ganglia.gmetric4j

gmetric4j

1.0.10

io. airlift

compressor de ar

0,21

io.delta

delta-compartilhamento-spark_2.12

0.3.0

io.dropwizard.métricas

núcleo de métricas

4.1.1

io.dropwizard.métricas

métricas-grafite

4.1.1

io.dropwizard.métricas

métricas-healthchecks

4.1.1

io.dropwizard.métricas

métricas-jetty9

4.1.1

io.dropwizard.métricas

métricas-jmx

4.1.1

io.dropwizard.métricas

métricas-JSON

4.1.1

io.dropwizard.métricas

métricas-JVM

4.1.1

io.dropwizard.métricas

métricas-servlets

4.1.1

io.netty

tudo

4.1.68. Final

io. prometheus

cliente simples

0.7.0

io. prometheus

simpleclient_common

0.7.0

io. prometheus

simpleclient_dropwizard

0.7.0

io. prometheus

gateway client_push simples

0.7.0

io. prometheus

client_servlet simples

0.7.0

io.prometheus.jmx

coletor

0.12.0

jakarta.anotação

jakarta.anotação-api

1.3.5

jakarta.servlet

jakarta.servlet-api

4.0.3

jakarta.validação

jakarta.validação-api

2.0.2

jakarta.ws.rs

jakarta.ws.rs-api

2.1.6

javax.ativação

ativação

1.1.1

javax.anotação

javax.anotação-api

1.3.2

javax.el

javax.el-api

2.2.4

javax.jdo

jdo-api

3.0.1

javax.transaction

jta

1.1

javax.transaction

API de transação

1.1

javax.xml.bind

jaxb-api

2.2.2

javax.xml.transmissão

stax-api

1,0-2

javolução

javolução

5.5.1

junte-se

junte-se

2.14.6

hora do dia

hora do dia

2.10.10

log4j

apache-log4j-extras

1.2.17

log4j

log4j

1.2.17

Maven-árvores

hive-2.3__hadoop-3.2

liball_deps_2,12

net.java.dev.jna

jna

5.8.0

net.razorvine

pirolita

4,30

net.sf.jpam

jpam

1.1

net.sf.opencsv

opencsv

2.3

net.sf.supercsv

supercsv

2.2.0

net.snowflake

SDK de ingestão de flocos de neve

0.9.6

net.snowflake

floco de neve-JDBC

3.13.3

net.snowflake

floco de neve faísca_2.12

2.9.0-spark_3.1

net.sourceforge.f2j

arpack_combined_all

0,1

org.acplt.remotetea

chá remoto - oncrpc

1.1.2

org.antlr

ST4

4.0.4

org.antlr

antlr-runtime

3.5.2

org.antlr

antlr4-runtime

4,8

org.antlr

modelo de string

3.2.1

org.apache.ant

formiga

1.9.2

org.apache.ant

formiga

1.9.2

org.apache.ant

lançador de formigas

1.9.2

org.apache.arrow

formato de seta

2.0.0

org.apache.arrow

núcleo de memória de seta

2.0.0

org.apache.arrow

rede de memória de seta

2.0.0

org.apache.arrow

vetor de seta

2.0.0

org.apache.avro

AVRO

1.10.2

org.apache.avro

avro-ipc

1.10.2

org.apache.avro

mapeado automaticamente

1.10.2

org.apache.commons

compressa comum

1,21

org.apache.commons

criptomoeda comum

1.1.0

org.apache.commons

commons-lang3

3.12.0

org.apache.commons

commons-math3

3.4.1

org.apache.commons

texto comum

1,6

org.apache.curator

curador-cliente

2.13.0

org.apache.curator

estrutura de curador

2.13.0

org.apache.curator

receitas de curadores

2.13.0

org.apache.derby

derby

10.14.2.0

org.apache.hadoop

API de cliente hadoop

3.3.1 - blocos de dados

org.apache.hadoop

tempo de execução do cliente hadoop

3.3.1

org.apache.hive

hive-beeline

2.3.9

org.apache.hive

colmeia-CLI

2.3.9

org.apache.hive

hive-JDBC

2.3.9

org.apache.hive

hive-llap-client

2.3.9

org.apache.hive

hive-lap-common

2.3.9

org.apache.hive

colmeia

2.3.9

org.apache.hive

hive-shims

2.3.9

org.apache.hive

API de armazenamento em nuvem

2.7.2

org.apache.hive.shims

calços de colmeia - 0,23

2.3.9

org.apache.hive.shims

calços de colmeia comuns

2.3.9

org.apache.hive.shims

hive-shims-programador

2.3.9

org.apache.htrace

htrace-core4

4.1.0 - incubação

org.apache.httpcomponents

cliente http

4.5.13

org.apache.httpcomponents

httpcore

4.4.12

org.apache.ivy

hera

2.5.0

org.apache.mesos

protobuf sombreado em mesos

1.4.0

org.apache.orc

núcleo orc

1.6.12

org.apache.orc

orc-mapreduce

1.6.12

org.apache.orc

calços de orc

1.6.12

org.apache.parquet

coluna de parquete

1.12.0-databricks-0003

org.apache.parquet

parquete comum

1.12.0-databricks-0003

org.apache.parquet

codificação de parquet

1.12.0-databricks-0003

org.apache.parquet

estruturas em formato de parquet

1.12.0-databricks-0003

org.apache.parquet

parquet-hadoop

1.12.0-databricks-0003

org.apache.parquet

parquet-jackson

1.12.0-databricks-0003

org.apache.thrift

libfb303

0.9.3

org.apache.thrift

libthrift

0.12.0

org.apache.xbean

xbean-asm9-shaded

4,20

org.apache.yetus

audiência-anotação

0.5.0

org.apache.zookeeper

tratador

3.6.2

org.apache.zookeeper

tratador de zoológico - juta

3.6.2

org.checkerframework

xadrez igual

3.5.0

org.codehaus.jackson

jackson-core-asl

1.9.13

org.codehaus.jackson

jackson-mapper-asl

1.9.13

org.codehaus.janino

compilador common

3.0.16

org.codehaus.janino

janino

3.0.16

org.datanucleus

núcleo de dados-api-jdo

4.2.4

org.datanucleus

núcleo de dados

4.1.17

org.datanucleus

núcleo de dados-rdbms

4.1.19

org.datanucleus

javax.jdo

3,2,0-m3

org.Eclipse.jetty

jetty-client

9.4.43.v20210629

org.Eclipse.jetty

continuação do cais

9.4.43.v20210629

org.Eclipse.jetty

jetty-http

9.4.43.v20210629

org.Eclipse.jetty

jetty-io

9.4.43.v20210629

org.Eclipse.jetty

jetty-jndi

9.4.43.v20210629

org.Eclipse.jetty

jetty-plus

9.4.43.v20210629

org.Eclipse.jetty

jetty-proxy

9.4.43.v20210629

org.Eclipse.jetty

segurança do cais

9.4.43.v20210629

org.Eclipse.jetty

servidor jetty-server

9.4.43.v20210629

org.Eclipse.jetty

jutty-servlet

9.4.43.v20210629

org.Eclipse.jetty

píer de servlets

9.4.43.v20210629

org.Eclipse.jetty

jetty-util

9.4.43.v20210629

org.Eclipse.jetty

jetty-util-ajax

9.4.43.v20210629

org.Eclipse.jetty

aplicativo web jetty-

9.4.43.v20210629

org.Eclipse.jetty

jetty-xml

9.4.43.v20210629

org.Eclipse.jetty.websocket

API de websoquete

9.4.43.v20210629

org.Eclipse.jetty.websocket

cliente websocket

9.4.43.v20210629

org.Eclipse.jetty.websocket

websocket-comum

9.4.43.v20210629

org.Eclipse.jetty.websocket

servidor websocket

9.4.43.v20210629

org.Eclipse.jetty.websocket

servlet websocket

9.4.43.v20210629

org.fusesource.leveldbjni

leveldbjni-tudo

1,8

org.glassfish.hk2

API hk2

2.6.1

org.glassfish.hk2

localizador hk2

2.6.1

org.glassfish.hk2

hk2-utils

2.6.1

org.glassfish.hk2

osgi-recurso-locator

1.0.3

org.glassfish.hk2.external

aopalliance - reembalado

2.6.1

org.glassfish.hk2.external

jakarta.inject

2.6.1

org.glassfish.jaxb

jaxb-runtime

2.3.2

org.glassfish.jersey.containers

servlet de contêiner de camisa

2,34

org.glassfish.jersey.containers

jersey-container-servlet-core

2,34

org.glassfish.jersey.core

cliente de camisa

2,34

org.glassfish.jersey.core

camiseta comum

2,34

org.glassfish.jersey.core

servidor de camisa

2,34

org.glassfish.jersey.inject

camiseta-hk2

2,34

org.hibernate.validator

validador de hibernação

6.1.0. Final

org.javassist

javassist

3,25,0 GA

org.jboss.logging

registro de jboss-logging

3.3.2. Final

org.jdbi

jdbi

2.63,1

org.jetbrains

anotação

17.0.0

org.joda

conversor de joda

1.7

org.jodd

núcleo nodular

3.5.2

org.json4s

json4s-ast_2.12

3,7,0-M11

org.json4s

json4s-core_2.12

3,7,0-M11

org.json4s

json4s-jackson_2.12

3,7,0-M11

org.json4s

json4s-scalap_2.12

3,7,0-M11

org.lz4

lz4-java

1.7.1

org.mariadb.JDBC

cliente mariadb-java

2.2.5

org.objenesis

objênese

2.5.1

org.postgresql

PostgreSQL

42,2,19

org.roaringbitmap

Mapa de bits estrondoso

0,9.14

org.roaringbitmap

calços

0,9.14

org.rocksdb

rocksdbjni

6.20.3

org.rosuda.rEngine

Motor

2.1.0

org.Scala-lang

Scala-compiler_2.12

2.12.14

org.Scala-lang

Scala-biblioteca.12

2.12.14

org.Scala-lang

Scala-reflect_2.12

2.12.14

org.Scala-lang.modules

Scala-collection-compat_2.12

2.4.3

org.Scala-lang.modules

Scala-parser-combinators_2.12

1.1.2

org.Scala-lang.modules

Scala-xml_2.12

1.2.0

org.Scala-sbt

interface de teste

1,0

org.scalacheck

scalacheck_2.12

1.14.2

org.scalactic

scalactic_2.12

3.0.8

org.scalanlp

breeze-macros_2.12

1.2

org.scalanlp

breeze_2.12

1.2

org.scalatest

scalatest_2.12

3.0.8

org.slf4j

jcl-over-slf4j

1,7.30

org.slf4j

jul-a-slf4j

1,7.30

org.slf4j

slf4j-api

1,7.30

org.slf4j

slf4j-log4j12

1,7.30

org.spark-project.spark

não utilizado

1.0.0

org.springframework

núcleo de mola

4.1.4. LANÇAMENTO

org.springframework

teste de primavera

4.1.4. LANÇAMENTO

org.threeten

treze e mais

1.5.0

org.tukaani

xz

1,8

org.typelevel

álgebra_2.12

2.0.1

org.typelevel

cats-kernel_2.12

2.1.1

org.typelevel

macro-compat_2,12

1.1.1

org.typelevel

spire-macros_2.12

0,17.0

org.typelevel

spire-platform_2.12

0,17.0

org.typelevel

spire-util_2.12

0,17.0

org.typelevel

spire_2.12

0,17.0

org.wildfly.openssl

wildfly-openssl

1.0.7. Final

org.xerial

sqlite-JDBC

3.8.11.2

org.xerial.snappy

snappy-java

1.1.8.4

org.yaml

snakeyaml

1,24

oro

oro

2.0.8

pt.edu.icm

Matrizes JLarge

1.5

software.Amazon.ion

ion-java

1.0.2

stax

stax-api

1.0.1

Última atualização em