Pular para o conteúdo principal

Databricks Runtime 8,0 (EoS)

nota

O suporte para essa versão do Databricks Runtime foi encerrado. Para saber a data do fim do suporte, consulte Histórico do fim do suporte. Para conhecer todas as versões compatíveis do site Databricks Runtime, consulte Databricks Runtime notas sobre as versões e a compatibilidade.

A Databricks lançou essa versão em março de 2021.

As notas a seguir sobre a versão fornecem informações sobre o site Databricks Runtime 8.0, alimentado por Apache Spark 3.1.1.

Novo recurso

O Databricks Runtime 8.0 inclui o Apache Spark 3.1.1. Para obter detalhes, consulte Apache Spark.

Melhorias

Delta agora é o formato quando um formato não é especificado default

Databricks Runtime A versão 8.0 altera o formato default para delta para simplificar a criação de uma tabela Delta. Quando o senhor cria uma tabela usando SQL comando, ou {Dataset|DataFrame}.{read|readStream|write|writeTo|writeStream} APIs e o senhor não especificar um formato, o formato default será delta.

Com o Delta Lake, o senhor obtém melhor desempenho em relação ao Parquet, melhor confiabilidade dos dados com validação de esquema avançada, restrições de qualidade e garantias transacionais. Com o Delta Lake, o senhor pode simplificar seu pipeline de dados com transmissão unificada estruturada e processamento de lotes em uma única fonte de dados.

Embora o site Databricks recomende o uso do Delta Lake para armazenar seus dados, o senhor pode ter um fluxo de trabalho legado que exija a migração para o Delta Lake. Para obter informações sobre a migração do fluxo de trabalho existente, consulte O que é Delta Lake em Databricks?

Nova transmissão estruturada default intervalo de disparo reduz custos

Se o senhor não definir um intervalo de acionamento usando Trigger.ProcessingTime em sua consulta de transmissão, o intervalo será definido como 500 ms. Anteriormente, o intervalo default era de 0 ms. Essa mudança deve reduzir o número de gatilhos vazios e reduzir os custos de armazenamento em nuvem, como listagem.

Otimizações ao usar o Glue catálogo de dados como metastore para o Databricks Runtime

Esta versão otimiza o AWS Glue catálogo de dados como um metastore Databricks Runtime desativando o carregamento automático das funções do banco de dados na inicialização Hive. Você pode controlar o carregamento de funções com o parâmetro de configuração spark.databricks.hive.metastore.init.reloadFunctions.enabled. Esse parâmetro será default false ao usar o Glue catálogo de dados como metastore, desativando o carregamento automático de funções. A definição desse parâmetro como true reativará o carregamento de funções durante a inicialização do Hive.

Use a função de transformação LDA com passagem de credenciais (visualização pública)

Agora, o senhor pode usar a função de transformação LDA em um clustering configurado para usar a passagem de credenciais para autenticação.

O clustering de usuário único configurado com passagem de credenciais não exige mais sistemas de arquivos confiáveis (visualização pública)

Não é mais necessário configurar os sistemas de arquivos locais como sistemas de arquivos confiáveis ao usar um clustering padrão ou de trabalho configurado para passagem de credenciais com um único usuário. Essa alteração remove restrições desnecessárias do sistema de arquivos ao executar o Job em um clustering de usuário único.

Atualizações da biblioteca

Apache Spark

O Databricks Runtime 8.0 inclui o Apache Spark 3.1.1.

Nesta secção:

Núcleo e Spark SQL

Destacar

Aprimoramentos de compatibilidade com ANSI SQL

Aprimoramentos de desempenho

Aprimoramentos de extensibilidade

  • Adicionar SupportsPartitions APIs no DataSourceV2(SPARK-31694)
  • Adicionar SupportsMetadataColumns API no DataSourceV2(SPARK-31255)
  • Tornar a serialização do cache SQL conectável(SPARK-32274)
  • Apresente a opção purge em TableCatalog.dropTable para o catálogo v2 (SPARK-33364)

Aprimoramentos do conector

aprimoramentos de recursos

Outras mudanças notáveis

PySpark

Projeto Zen

  • Projeto Zen: Melhorando a usabilidade do Python(SPARK-32082)
  • Suporte a dicas de tipo PySpark(SPARK-32681)
  • Reformulação da documentação do PySpark(SPARK-31851)
  • Migrar para o estilo de documentação do NumPy(SPARK-32085)
  • Opção de instalação para usuários do PyPI(SPARK-32017)
  • Eliminar a depreciação da inferência do esquema DataFrame da lista de dit(SPARK-32686)
  • Simplificar a mensagem de exceção das UDFs do Python(SPARK-33407)

Outras mudanças notáveis

transmissão estruturada

Aprimoramentos de desempenho

aprimoramentos de recursos

  • Adicionar DataStreamReader.table API(SPARK-32885)
  • Adicionar DataStreamWriter.toTable API(SPARK-32896)
  • Semi transmissão-transmissão esquerda join (SPARK-32862)
  • Transmissão-transmissão externa completa join (SPARK-32863)
  • Forneça uma nova opção para reter os arquivos de saída (SPARK-27188)
  • Adicionar Spark transmissão estructurada história Server Support(SPARK-31953)
  • Apresente a validação do esquema de estado entre a reinicialização da consulta (SPARK-27237)

Outras mudanças notáveis

  • Introduzir a validação do esquema para a transmissão do armazenamento do estado(SPARK-31894)
  • Suporte ao uso de um codec de compactação diferente no armazenamento do estado(SPARK-33263)
  • Espera infinita do conector Kafka porque os metadados nunca foram atualizados(SPARK-28367)
  • Atualize o Kafka para a versão 2.6.0(SPARK-32568)
  • Suporte de paginação para páginas de UI de transmissão estruturada(SPARK-31642, SPARK-30119)
  • Informações do estado na transmissão estruturada UI(SPARK-33223)
  • Informações de lacunas de marca d'água na transmissão estruturada UI(SPARK-33224)
  • Expor informações métricas personalizadas do estado na UI do SS(SPARK-33287)
  • Adicionar uma nova métrica em relação ao número de linhas posteriores à marca d'água(SPARK-24634)

MLlib

Destaques

Outras mudanças notáveis

SparkR

Atualizações de manutenção

Consulte Atualizações de manutenção do Databricks Runtime 8.0.

Ambiente do sistema

  • Sistema operacional : Ubuntu 18.04.5 LTS
  • Java : Zulu 8.50.0.51-CA-linux64 (build 1.8.0_275-b01)
  • Scala : 2.12.10
  • Python : 3.8.8 (atualizado a partir da versão 3.8.6 na atualização de manutenção de 26 de maio de 2021)
  • R : R versão 4.0.3 (2020-10-10)
  • Delta Lake 0.8.0

Instalado Python biblioteca

Biblioteca

Versão

Biblioteca

Versão

Biblioteca

Versão

apronta

1.4.4

criptomoeda asn1

1.4.0

chamada de volta

0.2.0

boto3

1,16.7

botocore

1.19,7

brotlipy

0.7.0

certifi

2020.12,5

caffi

1,14.3

chardet

3.0.4

criptografia

3.1.1

ciclador

0.10.0

Cython

0,29,21

decorador

4.4.2

distlib

0.3.1

docutils

0,15.2

pontos de entrada

0,3

bloqueio de arquivo

3.0.12

Índia

2,10

ipykernel

5.3.4

ipython

7.19.0

ipython-genutils

0.2.0

jedi

0,17.2

jmespath

0.10.0

joblib

0,17.0

cliente jupyter

6.1.7

núcleo jupyter

4.6.3

solucionador de kiwi

1.3.0

coalas

1.5.0

Matplotlib

3.2.2

entorpecido

1.19.2

Pandas

1.1.3

parso

0.7.0

bode expiatório

0.5.1

esperar

4.8.0

picles

0.7.5

pip

20.2.4

kit de ferramentas de aviso

3.0.8

psycopg2

2.8.5

processo pty

0.6.0

flecha

1.0.1

pycparser

2,20

Pigmentos

2.7.2

PyOpenSSL

19.1.0

análise de pipa

2.4.7

Meias PY

1.7.1

Python-dateutil

2.8.1

pytz

2020,1

pizma

19,0.2

pedidos

2.24,0

transferência s3

0.3.3

scikit-learn

0,23,2

pegajoso

1.5.2

marítimo

0.10.0

ferramentas de configuração

50,3.1

seis

1,15.0

modelos de estatísticas

0.12.0

threadpool ctl

2.1.0

tornado

6.0.4

almôndegas

5.0.5

urllib3

1,25.11

ambiente virtual

20.2.1

largura do wc

0.2.5

Python wheel

0,35,1

Instalada a R biblioteca

As bibliotecas R são instaladas a partir do Snapshot Microsoft CRAN em 2020-11-02.

Biblioteca

Versão

Biblioteca

Versão

Biblioteca

Versão

askpass

1.1

afirme que

0.2.1

portas traseiras

1.2.1

base

4.0.3

base64enc

0,1-3

POR

1,72,0-3

pouco

4.0.4

bit64

4.0.5

bolha

1.2.1

inicialização

1,3-25

fermentar

1,0-6

brio

1.1.0

vassoura

0.7.2

chamador

3.5.1

cursor

6,0-86

guarda de celas

1.1.0

crono

2,3-56

Aula

7,3-17

CLIPE

2.2.0

clipe

0.7.1

Cluster

2.1.0

ferramentas de código

0,2-18

espaço de cores

2,0-0

marca comum

1.7

compilador

4.0.3

configuração

0,3

capa

3.5.1

cpp11

0.2.4

giz de cera

1.3.4

Credenciais

1.3.0

diafonia

1.1.0.1

cacho

4.3

data.tabela

1,13.4

conjunto de dados

4.0.3

DBI

1.1.0

dbplyr

2.0.0

desc

1.2.0

ferramentas de desenvolvimento

2.3.2

diff

0.3.2

digerir

0,6.27

dplyr

1.0.2

DT

0,16

reticências

0.3.1

avalie

0,14

fansi

0.4.1

colorista

2.0.3

mapa rápido

1.0.1

para gatos

0.5.0

para cada um

1.5.1

estrangeira

0,8-79

forjar

0.2.0

fs

1.5.0

futuro

1,21,0

genéricas

0.1.0

obter

1.0.2

ggplot2

3.3.2

gh

1.2.0

gitcreds

0.1.1

glmnet

4,0-2

globais

0.14.0

cola

1.4.2

goleiro

0.2.2

gráficos

4.0.3

Dispositivos GR

4.0.3

grade

4.0.3

Grid Extra

2.3

gsubfn

0,7

mesa

0.3.0

refúgio

2.3.1

mais alto

0,8

HMS

0.5.3

ferramentas html

0.5.0

widgets html

1.5.3

http.uv

1.5.4

httr

1.4.2

escritor

1.3.2

HWriter Plus

1,0-3

mini

0.3.1

ipred

0,9-9

isóbanda

0.2.3

iteradores

1,0.13

jsonlite

1.7.2

Kern Smooth

2,23-18

tricotar

1,30

rótulo

0.4.2

posteriormente

1.1.0.1

treliça

0,20-41

lava

1.6.8.1

preguiçoso

0.2.2

ciclo de vida

0.2.0

ouvindo

0,8.0

lubrificar

1.7.9.2

magritter

2.0.1

Markdown

1.1

MASSA

7,3-53

Matriz

1,2-18

memoise

1.1.0

métodos

4.0.3

mgcv

1,8-33

mímica

0,9

Métricas do modelo

1.2.2.2

modelar

0.1.8

munsell

0.5.0

nome

3,1-151

net

7,3-14

Número Deriv

2016,8-1,1

openssl

1.4.3

paralelo

4.0.3

paralelamente

1,22,0

pilar

1.4.7

pkgbuild

1.1.0

pkgconfig

2.0.3

carregamento de pacotes

1.1.0

plogr

0.2.0

plyr

1.8.6

elogio

1.0.0

unidades bonitas

1.1.1

ProC

1.16.2

processa

3.4.5

prodlim

13/11/2019

progresso

1.2.2

promessas

1.1.1

proto

1.0.0

ps

1.5.0

ronronar

0.3.4

r2d3

0.2.3

R6

2.5.0

Floresta aleatória

4,6-14

corredeiras

0.3.1

rcmdcheck

1.3.3

Cervejaria RColor

1,1-2

Rcpp

1.0.5

leitor

1.4.0

readxl

1.3.1

receitas

0,1,15

revanche

1.0.1

revanche 2

2.1.2

controles remotos

2.2.0

reprex

0.3.0

remodelar 2

1.4.4

rex

1.2.0

rlang

0.4.9

rmarkdown

2.6

RODBC

1,3-17

roxigênio2

7.1.1

rpartem

4,1-15

rprojroot

2.0.2

Reservar

1,8-7

RSQLite

2.2.1

API do estúdio

0,13

reversões

2.0.2

colete

0.3.6

escala

1.1.1

seletor

0,4-2

informações da sessão

1.1.1

forma

1.4.5

brilhante

1.5.0

ferramentas de origem

0.1.7

Sparklyr

1.5.2

SparkR

3.1.0

espacial

7,3-11

splines

4.0.3

sqldf

0,4-11

QUADRADO

2020,5

estatísticas

4.0.3

estatísticas4

4.0.3

stringi

1.5.3

longarina

1.4.0

sobrevivência

3,2-7

diz

3.4

tcltk

4.0.3

Demonstrações de ensino

2,10

teste isso

3.0.0

petiscar

3.0.4

arrumado

1.1.2

seleção arrumada

1.1.0

tidyverso

1.3.0

Hora/Data

3043,102

tinytex

0,28

Ferramentas

4.0.3

use isso

2.0.0

utf 8

1.1.4

utilidades

4.0.3

uuid

0,1-4

vctrs

0.3.5

Viridis Lite

0.3.0

waldo

0.2.3

bigode

0,4

murchar

2.3.0

diversão

0,19

xml2

1.3.2

xopen

1.0.0

x estável

1,8-4

yaml

2.2.1

compactar

2.1.1

Instalei Java e Scala biblioteca (versão de clusteringScala 2.12)

ID do grupo

ID do artefato

Versão

chifre

chifre

2.7.7

com.amazonaws

Amazon-kinesis-client

1.12.0

com.amazonaws

aws-java-sdk-autoscale

1,11.655

com.amazonaws

formação de nuvem aws-java-sdk

1,11.655

com.amazonaws

aws-java-sdk-cloudfront

1,11.655

com.amazonaws

aws-java-sdk-cloudhsm

1,11.655

com.amazonaws

aws-java-sdk-cloudsearch

1,11.655

com.amazonaws

aws-java-sdk-cloudtrail

1,11.655

com.amazonaws

aws-java-sdk-cloudwatch

1,11.655

com.amazonaws

métricas aws-java-sdk-cloudwatch

1,11.655

com.amazonaws

aws-java-sdk-codedeploy

1,11.655

com.amazonaws

identidade cognitiva aws-java-sdk

1,11.655

com.amazonaws

aws-java-sdk-cognitosync

1,11.655

com.amazonaws

aws-java-sdk-config

1,11.655

com.amazonaws

aws-java-sdk-core

1,11.655

com.amazonaws

pipeline de dados aws-java-sdk

1,11.655

com.amazonaws

aws-java-sdk-conexão direta

1,11.655

com.amazonaws

diretório aws-java-sdk

1,11.655

com.amazonaws

aws-java-sdk-dynamodb

1,11.655

com.amazonaws

aws-java-sdk-ec2

1,11.655

com.amazonaws

aws-java-sdk-ecs

1,11.655

com.amazonaws

aws-java-sdk-efs

1,11.655

com.amazonaws

aws-java-sdk-elasticache

1,11.655

com.amazonaws

aws-java-sdk-elasticbeanstalk

1,11.655

com.amazonaws

balanceamento de carga elástico aws-java-sdk

1,11.655

com.amazonaws

transcodificador elástico aws-java-sdk-

1,11.655

com.amazonaws

aws-java-sdk-emr

1,11.655

com.amazonaws

aws-java-sdk-glacier

1,11.655

com.amazonaws

aws-java-sdk-iam

1,11.655

com.amazonaws

aws-java-sdk-importação/exportação

1,11.655

com.amazonaws

aws-java-sdk-kinesis

1,11.655

com.amazonaws

aws-java-sdk-kms

1,11.655

com.amazonaws

aws-java-sdk-lambda

1,11.655

com.amazonaws

aws-java-sdk-logs

1,11.655

com.amazonaws

aws-java-sdk - aprendizado de máquina

1,11.655

com.amazonaws

aws-java-sdk-opsworks

1,11.655

com.amazonaws

aws-java-sdk-rds

1,11.655

com.amazonaws

aws-java-sdk-redshift

1,11.655

com.amazonaws

aws-java-sdk-route53

1,11.655

com.amazonaws

aws-java-sdk-s3

1,11.655

com.amazonaws

aws-java-sdk-ses

1,11.655

com.amazonaws

aws-java-sdk-simpledb

1,11.655

com.amazonaws

aws-java-sdk - fluxo de trabalho simples

1,11.655

com.amazonaws

aws-java-sdk-sns

1,11.655

com.amazonaws

aws-java-sdk-sqs

1,11.655

com.amazonaws

aws-java-sdk-ssm

1,11.655

com.amazonaws

gateway de armazenamento aws-java-sdk

1,11.655

com.amazonaws

aws-java-sdk-sts

1,11.655

com.amazonaws

suporte aws-java-sdk

1,11.655

com.amazonaws

aws-java-sdk-swf-biblioteca

1.11.22

com.amazonaws

aws-java-sdk-workspace

1,11.655

com.amazonaws

jmespath-java

1,11.655

com.chuusai

sem forma_2.12

2.3.3

com.clearspring.analítica

transmissão

2.9.6

com.databricks

Reservar

1,8-3

com.databricks

jets3t

0.7.1-0

com.databricks.scalapb

plugin_2.12 do compilador

0,4,15-10

com.databricks.scalapb

scalapb-runtime_2.12

0,4,15-10

com.esotérico software

crio-sombreado

4.0.2

com.esotérico software

minlog

1.3.0

com.fasterxml

colega de classe

1.3.4

com.fasterxml.jackson.core

jackson-anotação

2.10.0

com.fasterxml.jackson.core

jackson-core

2.10.0

com.fasterxml.jackson.core

vinculação de dados jackson

2.10.0

formato de dados com.fasterxml.jackson.

formato de dados jackson-cbor

2.10.0

com.fasterxml.jackson.tipo de dados

jackson-datatype-joda

2.10.0

com.fasterxml.jackson.module

parâmetro do módulo jackson

2.10.0

com.fasterxml.jackson.module

jackson-module-Scala.12

2.10.0

com.github.ben-manes.cafeína

cafeína

2.3.4

com.github.fommil

descarregador

1.1

com.github.fommil.netlib

abdômen

1.1.2

com.github.fommil.netlib

native_ref-java

1.1

com.github.fommil.netlib

native_ref-java-nativos

1.1

com.github.fommil.netlib

sistema_nativo-java

1.1

com.github.fommil.netlib

native_system-java-natives

1.1

com.github.fommil.netlib

netlib-native_ref-linux-x86_64-natives

1.1

com.github.fommil.netlib

netlib-native_system-linux-x86_64-natives

1.1

com.github.joshelser

dropwizard-métricas-hadoop-metrics2-reporter

0.1.2

com.github.luben

zstd-jni

1,4,8-1

com.github.wendykierp

JTransforma

3.1

com.google.code.findbugs

jsr305

3.0.0

com.google.code.gson

gson

2.2.4

com.google.flatbuffers

tampões planos-java

1.9.0

com.google.goiaba

goiaba

15,0

com.google.protobuf

protobuf-java

2.6.1

banco de dados com.h2

h2

1,4,195

com.helger

perfilador

1.1.1

com.jcraft

jsch

0,1,50

com.jolbox

bonecp

VERSÃO 0.8.0.

com.lihaoyi

código-fonte_2.12

0.1.9

com.microsoft.sqlserver

mssql-JDBC

8.2.1. jre8

com.microsoft.azure

azure-data lake-store-sdk

2.3.9

comendo

comprimir-lzf

1.0.3

com.sun.mail

javax.mail

1.5.2

com.trunning

JSON

1,8

com.thoughtworks.paranamer

paranâmero

2.8

com.trueaccord.lenses

lentes_2.12

0.4.12

com.Twitter

chill-java

0,9.5

com.Twitter

chill_2.12

0,9.5

com.Twitter

util-app_2.12

7.1.0

com.Twitter

util-core_2.12

7.1.0

com.Twitter

função-útil_2.12

7.1.0

com.Twitter

util-jvm_2.12

7.1.0

com.Twitter

util-lint_2.12

7.1.0

com.Twitter

util-registry_2.12

7.1.0

com.Twitter

util-stats_2.12

7.1.0

com.typesafe

configuração

1.2.1

com.typesafe.Scala-logging

Scala-logging_2.12

3.7.2

com.univocidade

analisadores de univocidade

2.9.0

com.zaxxer

HikaricP

3.1.0

folhas de feijão comum

folhas de feijão comum

1.9.4

comum-CLI

comum-CLI

1.2

codec comum

codec comum

1,10

coleções comuns

coleções comuns

3.2.2

configuração comum

configuração comum

1,6

commons-dbcp

commons-dbcp

1.4

digestor comum

digestor comum

1,8

upload de arquivo commons

upload de arquivo commons

1.3.3

commons-httpclient

commons-httpclient

3.1

commons-io

commons-io

2,4

linguagem comum

linguagem comum

2.6

registro de bens comuns

registro de bens comuns

1.1.3

commons-net

commons-net

3.1

comum-pool

comum-pool

1.5.4

info.ganglia.gmetric4j

gmetric4j

1.0.10

io. airlift

compressor de ar

0,10

io.dropwizard.métricas

núcleo de métricas

4.1.1

io.dropwizard.métricas

métricas-grafite

4.1.1

io.dropwizard.métricas

métricas-healthchecks

4.1.1

io.dropwizard.métricas

métricas-jetty9

4.1.1

io.dropwizard.métricas

métricas-jmx

4.1.1

io.dropwizard.métricas

métricas-JSON

4.1.1

io.dropwizard.métricas

métricas-JVM

4.1.1

io.dropwizard.métricas

métricas-servlets

4.1.1

io.netty

tudo

4.1.51.Final

io. prometheus

cliente simples

0.7.0

io. prometheus

simpleclient_common

0.7.0

io. prometheus

simpleclient_dropwizard

0.7.0

io. prometheus

gateway client_push simples

0.7.0

io. prometheus

client_servlet simples

0.7.0

io.prometheus.jmx

coletor

0.12.0

jakarta.anotação

jakarta.anotação-api

1.3.5

jakarta.validação

jakarta.validação-api

2.0.2

jakarta.ws.rs

jakarta.ws.rs-api

2.1.6

javax.ativação

ativação

1.1.1

javax.el

javax.el-api

2.2.4

javax.jdo

jdo-api

3.0.1

javax.servlet

javax.servlet-api

3.1.0

javax.servlet.jsp

jsp-api

2.1

javax.transaction

jta

1.1

javax.transaction

API de transação

1.1

javax.xml.bind

jaxb-api

2.2.2

javax.xml.transmissão

stax-api

1,0-2

javolução

javolução

5.5.1

junte-se

junte-se

2.14.6

hora do dia

hora do dia

2.10.5

log4j

apache-log4j-extras

1.2.17

log4j

log4j

1.2.17

net.razorvine

pirolita

4,30

net.sf.jpam

jpam

1.1

net.sf.opencsv

opencsv

2.3

net.sf.supercsv

supercsv

2.2.0

net.snowflake

SDK de ingestão de flocos de neve

0.9.6

net.snowflake

floco de neve-JDBC

3.12.8

net.snowflake

floco de neve faísca_2.12

2.8.1-spark_3.0

net.sourceforge.f2j

arpack_combined_all

0,1

org.acplt.remotetea

chá remoto - oncrpc

1.1.2

org.antlr

ST4

4.0.4

org.antlr

antlr-runtime

3.5.2

org.antlr

antlr4-runtime

4,8-1

org.antlr

modelo de string

3.2.1

org.apache.ant

formiga

1.9.2

org.apache.ant

formiga

1.9.2

org.apache.ant

lançador de formigas

1.9.2

org.apache.arrow

formato de seta

2.0.0

org.apache.arrow

núcleo de memória de seta

2.0.0

org.apache.arrow

rede de memória de seta

2.0.0

org.apache.arrow

vetor de seta

2.0.0

org.apache.avro

AVRO

1.8.2

org.apache.avro

avro-ipc

1.8.2

org.apache.avro

avro-mapred-hadoop2

1.8.2

org.apache.commons

compressa comum

1,20

org.apache.commons

criptomoeda comum

1.1.0

org.apache.commons

commons-lang3

3.10

org.apache.commons

commons-math3

3.4.1

org.apache.commons

texto comum

1,6

org.apache.curator

curador-cliente

2.7.1

org.apache.curator

estrutura de curador

2.7.1

org.apache.curator

receitas de curadores

2.7.1

org.apache.derby

derby

10.12.1.1

org.apache.directory.api

api-asn1-api

1,0,0-M20

org.apache.directory.api

utilitário de API

1,0,0-M20

org.apache.directory.server

apacheds-i18n

2,0,0-M15

org.apache.directory.server

codec apacheds-kerberos

2,0,0-M15

org.apache.hadoop

hadoop-anotação

2.7.4

org.apache.hadoop

autenticação hadoop

2.7.4

org.apache.hadoop

cliente hadoop

2.7.4

org.apache.hadoop

hadoop-comum

2.7.4

org.apache.hadoop

hadoop-HDFS

2.7.4

org.apache.hadoop

aplicativo cliente hadoop mapreduce

2.7.4

org.apache.hadoop

hadoop-mapreduce-client-common

2.7.4

org.apache.hadoop

núcleo do cliente hadoop-mapreduce

2.7.4

org.apache.hadoop

hadoop-mapreduce-client-jobclient

2.7.4

org.apache.hadoop

hadoop-mapreduce-client-shuffle

2.7.4

org.apache.hadoop

API hadoop yarn

2.7.4

org.apache.hadoop

cliente hadoop-yarn

2.7.4

org.apache.hadoop

hadoop-yarn-common

2.7.4

org.apache.hadoop

servidor hadoop-yarn-comum

2.7.4

org.apache.hive

hive-beeline

2.3.7

org.apache.hive

colmeia-CLI

2.3.7

org.apache.hive

colmeia comum

2.3.7

org.apache.hive

núcleo hive-exec-core

2.3.7

org.apache.hive

hive-JDBC

2.3.7

org.apache.hive

hive-llap-client

2.3.7

org.apache.hive

hive-lap-common

2.3.7

org.apache.hive

Hive metastore

2.3.7

org.apache.hive

colmeia

2.3.7

org.apache.hive

hive-shims

2.3.7

org.apache.hive

API de armazenamento em nuvem

2.7.2

org.apache.hive

geração de código vetorial hive

2.3.7

org.apache.hive.shims

calços de colmeia - 0,23

2.3.7

org.apache.hive.shims

calços de colmeia comuns

2.3.7

org.apache.hive.shims

hive-shims-programador

2.3.7

org.apache.htrace

htrace-core

3.1.0 - incubação

org.apache.httpcomponents

cliente http

4.5.6

org.apache.httpcomponents

httpcore

4.4.12

org.apache.ivy

hera

2.4.0

org.apache.mesos

protobuf sombreado em mesos

1.4.0

org.apache.orc

núcleo orc

1.5.12

org.apache.orc

orc-mapreduce

1.5.12

org.apache.orc

calços de orc

1.5.12

org.apache.parquet

coluna de parquete

1.10.1 - blocos de dados 6

org.apache.parquet

parquete comum

1.10.1 - blocos de dados 6

org.apache.parquet

codificação de parquet

1.10.1 - blocos de dados 6

org.apache.parquet

formato de parquet

2.4.0

org.apache.parquet

parquet-hadoop

1.10.1 - blocos de dados 6

org.apache.parquet

parquet-jackson

1.10.1 - blocos de dados 6

org.apache.thrift

libfb303

0.9.3

org.apache.thrift

libthrift

0.12.0

org.apache.velocity

velocidade

1.5

org.apache.xbean

xbean-asm7-shaded

4,15

org.apache.yetus

audiência-anotação

0.5.0

org.apache.zookeeper

tratador

3.4.14

org.codehaus.jackson

jackson-core-asl

1.9.13

org.codehaus.jackson

jackson-jaxers

1.9.13

org.codehaus.jackson

jackson-mapper-asl

1.9.13

org.codehaus.jackson

jackson-xc

1.9.13

org.codehaus.janino

compilador common

3.0.16

org.codehaus.janino

janino

3.0.16

org.datanucleus

núcleo de dados-api-jdo

4.2.4

org.datanucleus

núcleo de dados

4.1.17

org.datanucleus

núcleo de dados-rdbms

4.1.19

org.datanucleus

javax.jdo

3,2,0-m3

org.Eclipse.jetty

jetty-client

9.4.34.v20201102

org.Eclipse.jetty

continuação do cais

9.4.34.v20201102

org.Eclipse.jetty

jetty-http

9.4.34.v20201102

org.Eclipse.jetty

jetty-io

9.4.34.v20201102

org.Eclipse.jetty

jetty-jndi

9.4.34.v20201102

org.Eclipse.jetty

jetty-plus

9.4.34.v20201102

org.Eclipse.jetty

jetty-proxy

9.4.34.v20201102

org.Eclipse.jetty

segurança do cais

9.4.34.v20201102

org.Eclipse.jetty

servidor jetty-server

9.4.34.v20201102

org.Eclipse.jetty

jutty-servlet

9.4.34.v20201102

org.Eclipse.jetty

píer de servlets

9.4.34.v20201102

org.Eclipse.jetty

jetty-util

9.4.34.v20201102

org.Eclipse.jetty

aplicativo web jetty-

9.4.34.v20201102

org.Eclipse.jetty

jetty-xml

9.4.34.v20201102

org.fusesource.leveldbjni

leveldbjni-tudo

1,8

org.glassfish.hk2

API hk2

2.6.1

org.glassfish.hk2

localizador hk2

2.6.1

org.glassfish.hk2

hk2-utils

2.6.1

org.glassfish.hk2

osgi-recurso-locator

1.0.3

org.glassfish.hk2.external

aopalliance - reembalado

2.6.1

org.glassfish.hk2.external

jakarta.inject

2.6.1

org.glassfish.jersey.containers

servlet de contêiner de camisa

2,30

org.glassfish.jersey.containers

jersey-container-servlet-core

2,30

org.glassfish.jersey.core

cliente de camisa

2,30

org.glassfish.jersey.core

camiseta comum

2,30

org.glassfish.jersey.core

servidor de camisa

2,30

org.glassfish.jersey.inject

camiseta-hk2

2,30

org.glassfish.jersey.media

jersey-media-jaxb

2,30

org.hibernate.validator

validador de hibernação

6.1.0. Final

org.javassist

javassist

3,25,0 GA

org.jboss.logging

registro de jboss-logging

3.3.2. Final

org.jdbi

jdbi

2.63,1

org.joda

conversor de joda

1.7

org.jodd

núcleo nodular

3.5.2

org.json4s

json4s-ast_2.12

3,7,0 M5

org.json4s

json4s-core_2.12

3,7,0 M5

org.json4s

json4s-jackson_2.12

3,7,0 M5

org.json4s

json4s-scalap_2.12

3,7,0 M5

org.lz4

lz4-java

1.7.1

org.mariadb.JDBC

cliente mariadb-java

2.1.2

org.objenesis

objênese

2.5.1

org.postgresql

PostgreSQL

42,14

org.roaringbitmap

Mapa de bits estrondoso

0.9.0

org.roaringbitmap

calços

0.9.0

org.rocksdb

rocksdbjni

6.2.2

org.rosuda.rEngine

Motor

2.1.0

org.Scala-lang

Scala-compiler_2.12

2.12.10

org.Scala-lang

Scala-biblioteca.12

2.12.10

org.Scala-lang

Scala-reflect_2.12

2.12.10

org.Scala-lang.modules

Scala-collection-compat_2.12

2.1.1

org.Scala-lang.modules

Scala-parser-combinators_2.12

1.1.2

org.Scala-lang.modules

Scala-xml_2.12

1.2.0

org.Scala-sbt

interface de teste

1,0

org.scalacheck

scalacheck_2.12

1.14.2

org.scalactic

scalactic_2.12

3.0.8

org.scalanlp

breeze-macros_2.12

1,0

org.scalanlp

breeze_2.12

1,0

org.scalatest

scalatest_2.12

3.0.8

org.slf4j

jcl-over-slf4j

1,7.30

org.slf4j

jul-a-slf4j

1,7.30

org.slf4j

slf4j-api

1,7.30

org.slf4j

slf4j-log4j12

1,7.30

org.spark-project.spark

não utilizado

1.0.0

org.springframework

núcleo de mola

4.1.4. LANÇAMENTO

org.springframework

teste de primavera

4.1.4. LANÇAMENTO

org.threeten

treze e mais

1.5.0

org.tukaani

xz

1.5

org.typelevel

álgebra_2.12

2,0,0-M2

org.typelevel

cats-kernel_2.12

2,0,0-M4

org.typelevel

maquinista_2.12

0.6.8

org.typelevel

macro-compat_2,12

1.1.1

org.typelevel

spire-macros_2.12

0,17.0-M1

org.typelevel

spire-platform_2.12

0,17.0-M1

org.typelevel

spire-util_2.12

0,17.0-M1

org.typelevel

spire_2.12

0,17.0-M1

org.wildfly.openssl

wildfly-openssl

1.0.7. Final

org.xerial

sqlite-JDBC

3.8.11.2

org.xerial.snappy

snappy-java

1.1.8.2

org.yaml

snakeyaml

1,24

oro

oro

2.0.8

pt.edu.icm

Matrizes JLarge

1.5

software.Amazon.ion

ion-java

1.0.2

stax

stax-api

1.0.1

xmlenc

xmlenc

0,52