メインコンテンツまでスキップ

Databricks Runtime 6.3 (EoS)

注記

この Databricks Runtime バージョンのサポートは終了しました。 サポート終了日については、「 サポート終了の履歴」を参照してください。 サポートされているすべての Databricks Runtime バージョンについては、「 Databricks Runtime リリースノートのバージョンと互換性」を参照してください。

Databricks は 2020 年 1 月にこのバージョンをリリースしました。

次のリリースノートでは、 Databricks Runtime 6.3, powered by Apache Sparkに関する情報を提供しています。

新機能

Delta Lake

このリリースでは、他の処理エンジンからの Delta テーブルの読み取りのサポートと、コンカレンシーの向上が導入されています。 主な機能は次のとおりです。

  • マニフェストファイルを使用した処理エンジンのサポート -Delta Presto とAmazon Athena (パブリックプレビュー)、Snowflake (試験段階)、Redshift Spectrum (試験段階) のScala テーブルをクエリできるようになりました。マニフェストファイルは、 、 、 、Java PythonSQLAPIを使用して生成できます。

  • すべての Delta Lake 操作のコンカレンシーの向上 - より多くの Delta Lake 操作を同時に実行できるようになりました。Delta Lake のオプティミスティック コンカレンシー制御は、競合検出をよりきめ細かくすることで改善されました。これにより、Delta テーブルで複雑なワークフローを簡単に実行できます。例えば:

    • 新しいパーティションが追加されている間に、古いパーティションで削除 (GDPR コンプライアンスなど) を同時に実行します。
    • 不整合なパーティション セットで更新とマージを同時に実行します。
    • ファイル圧縮をアペンドと同時に実行する。

    「Databricks での分離レベルと書き込みの競合」を参照してください。

  • ファイル圧縮のサポートの強化 - DataFrameWriter オプション dataChangefalseに設定してファイルを書き換えることで、ファイルを圧縮できるようになりました。 このオプションを使用すると、圧縮操作を他のバッチ操作やストリーミング操作と同時に実行できます。 詳細については、「 ファイルの圧縮 」を参照してください。

  • 挿入専用マージのパフォーマンスの向上 - Delta Lake では、挿入句のみを含み、更新句がないマージ操作のパフォーマンスがより最適化されるようになりました。 さらに、Delta Lake では、このような挿入専用マージからの書き込みでは、新しいデータのみがテーブルに追加されるようになります。 そのため、構造化ストリーミングと挿入のみのマージを使用して、データ (ログなど) の継続的な重複排除を実行できるようになりました。 詳細については、「 Delta テーブルに書き込むときのデータ重複除去 」を参照してください。

プロセスの分離が有効になっている場合に許可リストにポートを追加する

注記

この記事には、Databricks が使用していない用語である ホワイトリスト という用語への参照が含まれています。この用語がソフトウェアから削除されると、この記事から削除されます。

クラスターでテーブル ACL や認証情報のパススルーなどのセキュリティ機能を有効にすると、Python Sparkconfigspark.databricks.pyspark.iptable.outbound.whitelisted.ports を許可するポートに設定することで、 プロセスがアクセスできるようにする追加の送信ポートを指定できるようになりました。サポートされている設定値の形式は [port[:port][,port[:port]]...]で、例: 21,22,9000:9999です。 ポートは有効な範囲 (0 から 65535) 内にある必要があります。

Scalaジョブのジョブ出力を無効にする

ジョブ出力 (stdout に出力されるログ出力など) には、20MB のサイズ制限があります。stdout がドライバーから返されるのを防ぐことができます。 Databricks は、 spark.databricks.driver.disableScalaOutput Spark 構成を true。 このフラグは、Scala JAR ジョブと Scala ノートブックのセル出力を制御します。 JAR ジョブの出力サイズ制限を参照してください。

インライン Matplotlib フィギュアが Databricks ノートブックでサポートされるようになりました (パブリック プレビュー)

これで、図を display メソッドに渡さなくても、Matplotlib の図を自動的に表示できるようになりました。 詳細については、 Matplotlibを参照してください。

改善

  • shutil.copytree/dbfsのために働いています。
  • 高同時実行モードのクラスターで構造化ストリーミング 本番運用 ジョブを実行すると、以前に実行されていたジョブが適切に終了しなかったために、ジョブの再起動が失敗することがありました。 前回の実行が確実に停止するようにするには、クラスターで SQL 構成 spark.sql.streaming.stopActiveRunOnRestart true を設定します。 ストリームを適切に停止できない場合は、15秒後にタイムアウト例外がスローされます。この場合は、クラスターを再起動することをお勧めします。
  • インストールされているいくつかのRライブラリをアップグレードしました。 「インストールされている R ライブラリ」を参照してください。

Apache Spark

Databricks Runtime 6.3 には Apache Spark 2.4.4 が含まれています。 このリリースには、Spark のすべての修正と改善が含まれています Databricks Runtime 6.2 (EoS) に含まれており、Spark に対して行われた次の追加のバグ修正と機能強化も含まれています。

  • [SPARK-30198][CORE] BytesToBytesMapが内部のlong配列を期待どおりに拡大しない
  • [SPARK-29918][SQL] RecordBinaryComparatorは、longと比較した場合にエンディアンをチェックするべきである
  • [SPARK-30274][CORE] キーが最大容量に達すると、BytesToBytesMapルックアップが永久にハングしないようにします
  • [SPARK-25392][CORE][WEBUI] 履歴サーバーからプールページにアクセスする際のエラーページを防止
  • [SPARK-30263] [CORE] spark-submitで無視される非Sparkプロパティの潜在的に機密性の高い値をログに記録しない
  • [SPARK-28637][SQL] Thriftserverサポート間隔タイプ
  • [SPARK-30238][SQL] ハイブパーティションのプルーニングで文字列型と整数型のみをサポートできる
  • [SPARK-30198][CORE] BytesToBytesMapが内部のlong配列を期待どおりに拡大しない
  • [SPARK-24666][ML] numIterationsが大きい場合にWord2Vecが生成する無限大ベクトルを修正
  • [SPARK-30129][CORE] 認証が成功した後、TransportClientでクライアントのIDを設定する
  • [SPARK-30050][SQL]テーブルの分析と名前の変更で、ハイブテーブルのバケット情報を消去しないようにする必要があります
  • [SPARK-28152][SQL] MsSqlServerDialectのShortTypeをSMALLINTに、FloatTypeをREALにマッピング
  • [SPARK-29971][CORE] のバッファリークを修正 TransportFrameDecoder/TransportCipher
  • [SPARK-29970][WEBUI] Timelineviewのプリセーブオープン/クローズ状態
  • [SPARK-29949][SQL] JSON/CSVデータソースによるタイムスタンプのフォーマットを修正
  • [SPARK-27558][CORE] OOM例外で失敗したタスクを正常にクリーンアップ
  • [SPARK-29758][SQL] リクエストされた文字列フィールドの切り捨てを修正 json_tuple
  • [SPARK-29949][SQL] JSON/CSVデータソースによるタイムスタンプのフォーマットを修正
  • [SPARK-29936][R] SparkR lintエラーを修正し、lint-r GitHub Actionsを追加
  • [SPARK-29904][SQL] JSON/CSVデータソースによるマイクロ秒精度でのタイムスタンプの解析
  • [SPARK-29904][SQL] JSON/CSVデータソースによるマイクロ秒精度でのタイムスタンプの解析
  • [SPARK-26499][SQL] JdbcUtils.makeGetter が ByteType を処理しない
  • [SPARK-29682][SQL] Expand で競合する属性を正しく解決するように修正
  • [SPARK-29875][Python][SQL] 非推奨のpyarrow.open_streamの使用を避ける Spark 2.4.x の API
  • [SPARK-29850][SQL] 空のテーブルのソートマージ結合でメモリリークを起こさないように修正
  • [SPARK-28939][SQL] toRddによって実行されるプランのSQLConfを伝播

メンテナンスの更新

「Databricks Runtime 6.3 メンテナンスの更新」を参照してください。

システム環境

  • オペレーティングシステム :Ubuntu 16.04.6 LTSの
  • Java : 1.8.0_252
  • Scala : 2.11.12
  • Python : 3.7.3
  • R :Rバージョン3.6.2 (2019-12-12)
  • Delta Lake : 0.5.0
注記

Scala 2.12 は Apache Spark 2.4 の試験的な機能として使用できますが、Databricks Runtime 6.3 ではサポートされていません。

このセクションの内容:

インストール済み Python ライブラリ

ライブラリ

バージョン

ライブラリ

バージョン

ライブラリ

バージョン

ASN1暗号

0.24.0

バックコール

0.1.0

Boto

2.49.0

ボト3

1.9.162

ボトコア

1.12.163

認証

2019.3.9

cffi

1.12.2

シャルデ

3.0.4

暗号化手法

2.6.1

サーマルサイクラー

0.10.0

シトン

0.29.6

デコレータ

4.4.0

docutilsの

0.14

イドナ

2.8

ipykernel(英語)

5.1.0

アイパイソン

7.4.0

ipython-genutils

0.2.0

ジェダイ

0.13.3

jmespathの

0.9.4

jupyter-クライアント

5.2.4

ジュピターコア

4.4.0

キウイソルバー

1.1.0

Matplotlib

3.0.3

ナムピー

1.16.2

pandas

0.24.2

パルソ

0.3.4

パッツィ

0.5.1

pexpect

4.6.0

ピクルシェア

0.7.5

19.0.3

プロンプトツールキット

2.0.9

サイコップ2

2.7.6.1

PTYPROCESSの

0.6.0

ピアロー

0.13.0

pycparser

2.19

pycurlの

7.43.0

ピグメント

2.3.1

PyGObject

3.20.0

pyOpenSSLの

19.0.0

pyparsing (英語)

2.4.6

PySocks(パイソックス)

1.6.8

Python-apt

1.1.0.b1 + ubuntu0.16.04.5

Python-dateutil

2.8.0

ピッツ

2018.9

ピズム

18.0.0

要求

2.21.0

S3トランスファー

0.2.1

Scikit-Learn

0.20.3

scipy(サイピー)

1.2.1

シーボーン

0.9.0

セットアップツール

40.8.0

6

1.12.0

ssh-import-id

5.5

統計モデル

0.9.0

竜巻

6.0.2

トレイトレット

4.3.2

無人アップグレード

0.1

urllib3 の

1.24.1

virtualenv

16.4.1

WC幅

0.1.7

0.33.1

インストールされている R ライブラリ

ライブラリ

バージョン

ライブラリ

バージョン

ライブラリ

バージョン

aバインド

1.4-5

アスクパス

1.1

assertthat

0.2.1

バックポート

1.1.5

3.6.2

base64enc

0.1-3

BH

1.69.0-1

bit

1.1-14

ビット64

0.9-7

ビットプス

1.0-6

ブロッブ

1.2.0

ブート

1.3-23

醸成

1.0-6

コール

3.3.2

3.0-4

車データ

3.0-2

キャレット

6.0-84

セルレンジャー

1.1.0

クロン

2.3-54

クラス

7.3-15

CLI

1.1.0

clipr

0.7.0

clisymbolsの

1.2.0

クラスター

2.1.0

コードツール

0.2-16

カラースペース

1.4-1

コモンマーク

1.7

コンパイラ

3.6.2

コンフィグ

0.3

COVRの

3.3.2

クレヨン

1.3.4

クロストーク

1.0.0

Curl

4.2

データ.テーブル

1.12.6

データセット

3.6.2

DBI

1.0.0

dbplirの

1.4.2

DESC

1.2.0

開発ツール

2.2.1

ダイジェスト

0.6.22

ドエムシー

1.3.6

dplyrの

0.8.3

DT

0.9

省略記号

0.3.0

0.14

ファンシ

0.4.0

ファストマップ

1.0.1

フォーキャッツ

0.4.0

For each

1.4.7

外国の

0.8-74

鍛える

0.2.0

FSの

1.3.1

GBMの

2.1.5

ジェネリック

0.0.2

ggplot2の

3.2.1

gh

1.0.1

ギット2R

0.26.1

glmnet

2.0-18

1.3.1

ガウアー

0.2.1

グラフィックス

3.6.2

grDevicesの

3.6.2

グリッド

3.6.2

グリッドエクストラ

2.3

gsubfnの

0.7

GTABLE(GTABLE)

0.3.0

H2O(ヘトヘオ)

3.26.0.2

避難所

2.1.1

HMSの

0.5.1

htmlツール[htmltools]

0.4.0

htmlウィジェット

1.5.1

httpuv

1.5.2

httr

1.4.1

hwriter

1.3.2

hwriterPlusの

1.0-3

イニ

0.3.1

イプレッド

0.9-9

反復 子

1.0.12

jsonlite

1.6

カーンスムース

2.23-16

ラベリング

0.3

あとで

1.0.0

格子

0.20-38

溶岩

1.6.6

レイジーバル

0.2.2

ライフサイクル

0.1.0

リトル

0.3.9

LME4の

1.1-21

ルブリデート

1.7.4

マグリット

1.5

マッププロジェクト

1.2.6

マップ

3.3.0

マップツール

0.9-8

質量

7.3-51.5

マトリックス

1.2-18

マトリックスモデル

0.4-1

メモ

1.1.0

メソッド

3.6.2

mgcv

1.8-31

マイム

0.7

ミンカ

1.2.4

モデルメトリクス

1.2.2

マンセル

0.5.0

mvtnorm

1.0-11

nlme

3.1-143

NLOPTRの

1.2.1

ネット

7.3-12

numDerivの

2016.8-1.1

オープンSSL

1.4.1

openxlsxの

4.1.2

並列

3.6.2

pbkrtestの

0.4-7

1.4.2

pkgbuild の

1.0.6

pkgconfig

2.0.3

pkg子猫

0.1.5

pkgload(パッケージロード)

1.0.2

plogrの

0.2.0

プライル

1.8.4

褒める

1.0.0

プリティユニット

1.0.2

pROC

1.15.3

プロセスX

3.4.1

製品

2018.04.18

経過

1.2.2

約束

1.1.0

プロト

1.0.0

PS

1.3.0

ゴロゴロ

0.3.3

クォントレグ

5.51

R.メソッドS3

1.7.1

R.oo

1.22.0

R.utilsの

2.9.0

R2D3の

0.2.3

R6の

2.4.0

ランダムフォレスト

4.6-14

ラプディレクトリ

0.3.1

rcmdcheckの

1.3.3

RColorブリューワー

1.1-2

Rcpp

1.0.2

RcppEigen

0.3.3.5.0

RCのURL

1.95-4.12

読み取り

1.3.1

readxlの

1.3.1

レシピ

0.1.7

再戦

1.0.1

リモコン

2.1.0

形状変更2

1.4.3

レックス

1.1.2

リオ

0.5.16

ラン

0.4.1

RODBC

1.3-16

リオキシジェン2

6.1.1

rpart

4.1-15

rprojroot さん

1.3-2

サーブ

1.8-6

RSQLite (英語)

2.1.2

rstudioapi

0.10

rversions

2.0.0

1.0.0

セッション情報

1.1.1

shiny

1.4.0

ソースツール

0.1.7

SP

1.3-1

sparklyr

1.0.4

SparkR

2.4.5

スパース M

1.77

空間的

7.3-11

スプライン

3.6.2

sqldf

0.4-11

スクエアム

2017.10-1

statmod の

1.4.32

統計

3.6.2

統計4

3.6.2

ストリンギ

1.4.3

ストリンガー

1.4.0

生存

2.44-1.1

SYSの

3.3

tcltk

3.6.2

ティーチングデモ

2.10

テストを

2.2.1

ティブル

2.1.3

ティディル

1.0.0

ティディセレクト

0.2.5

日時

3043.102

ツール

3.6.2

usethisさん

1.5.1

UTF8

1.1.4

ユーティリティ

3.6.2

vctrs

0.2.0

viridisライト

0.3.0

ウイスカー

0.4

ウィザー

2.1.2

XML2の

1.2.2

xopen(オーペン)

1.0.0

エクステーブル

1.8-4

ヤムラ

2.2.0

ジーロット

0.1.0

郵便番号

2.0.4

インストール済み Java and Scala ライブラリ (Scala 2.11 クラスター版)

グループID

アーティファクト ID

バージョン

アントル

アントル

2.7.7

com.amazonawsの

Amazon-kinesis-client

1.8.10

com.amazonawsの

aws-java-sdk-オートスケール

1.11.595

com.amazonawsの

aws-java-sdk-cloudformation

1.11.595

com.amazonawsの

aws-java-sdk-cloudfront

1.11.595

com.amazonawsの

aws-java-sdk-cloudhsm

1.11.595

com.amazonawsの

aws-java-sdk-cloudsearch(英語)

1.11.595

com.amazonawsの

aws-java-sdk-cloudtrail

1.11.595

com.amazonawsの

aws-java-sdk-cloudwatch

1.11.595

com.amazonawsの

aws-java-sdk-cloudwatchメトリクス

1.11.595

com.amazonawsの

aws-java-sdk-コードデプロイ

1.11.595

com.amazonawsの

aws-java-sdk-cognitoアイデンティティ

1.11.595

com.amazonawsの

aws-java-sdk-cognitosync

1.11.595

com.amazonawsの

aws-java-sdk-configの

1.11.595

com.amazonawsの

aws-java-sdk-コア

1.11.595

com.amazonawsの

aws-java-sdk-データパイプライン

1.11.595

com.amazonawsの

aws-java-sdk-directconnectの

1.11.595

com.amazonawsの

aws-java-sdkディレクトリ

1.11.595

com.amazonawsの

aws-java-sdk-ダイナモDB

1.11.595

com.amazonawsの

aws-java-sdk-ec2 の

1.11.595

com.amazonawsの

aws-java-sdk-ecsの

1.11.595

com.amazonawsの

aws-java-sdk-efs

1.11.595

com.amazonawsの

aws-java-sdk-elasticache

1.11.595

com.amazonawsの

aws-java-sdk-elasticbeanstalk

1.11.595

com.amazonawsの

aws-java-sdk-elasticloadbalancing

1.11.595

com.amazonawsの

aws-java-sdk-elasticトランスコーダー

1.11.595

com.amazonawsの

aws-java-sdk-emr

1.11.595

com.amazonawsの

aws-java-sdk-glacier

1.11.595

com.amazonawsの

aws-java-sdk-グルー

1.11.595

com.amazonawsの

aws-java-sdk-iam

1.11.595

com.amazonawsの

aws-java-sdk-importexport

1.11.595

com.amazonawsの

aws-java-sdk-キネシス

1.11.595

com.amazonawsの

aws-java-sdk-kmsの

1.11.595

com.amazonawsの

aws-java-sdk-ラムダ

1.11.595

com.amazonawsの

aws-java-sdk-logs

1.11.595

com.amazonawsの

aws-java-sdk-機械学習

1.11.595

com.amazonawsの

aws-java-sdk-opsworks

1.11.595

com.amazonawsの

aws-java-sdk-rds

1.11.595

com.amazonawsの

aws-java-sdk-レッドシフト

1.11.595

com.amazonawsの

aws-java-sdk-ルート53

1.11.595

com.amazonawsの

aws-java-sdk-s3 の

1.11.595

com.amazonawsの

aws-java-sdk-ses

1.11.595

com.amazonawsの

aws-java-sdk-simpledb

1.11.595

com.amazonawsの

aws-java-sdk-シンプルなワークフロー

1.11.595

com.amazonawsの

aws-java-sdk-snsの

1.11.595

com.amazonawsの

aws-java-sdk-sqs

1.11.595

com.amazonawsの

aws-java-sdk-ssm

1.11.595

com.amazonawsの

aws-java-sdk-storagegateway

1.11.595

com.amazonawsの

aws-java-sdk-sts

1.11.595

com.amazonawsの

aws-java-sdk-サポート

1.11.595

com.amazonawsの

aws-java-sdk-swf-ライブラリ

1.11.22

com.amazonawsの

aws-java-sdk-ワークスペース

1.11.595

com.amazonawsの

jmespath-java

1.11.595

com.carrotsearchの

HPPCの

0.7.2

com.chuusai(英語)

shapeless_2.11

2.3.2

com.clearspring.アナリティクス

stream

2.7.0

com.databricksの

サーブ

1.8-3

com.databricksの

dbml-local_2.11

0.5.0-db8-spark2.4

com.databricksの

dbml-local_2.11-tests

0.5.0-db8-spark2.4

com.databricksの

ジェット3t

0.7.1-0

com.databricks.scalapb

compilerplugin_2.11

0.4.15-9

com.databricks.scalapb

scalapbのruntime_2.11

0.4.15-9

com.esotericソフトウェア

kryo-shaded(クリョシェード)

4.0.2

com.esotericソフトウェア

ミンログ

1.3.0

com.fasterxmlの

クラスメイト

1.0.0

com.fasterxml.jackson.core

ジャクソン-注釈

2.6.7

com.fasterxml.jackson.core

ジャクソンコア

2.6.7

com.fasterxml.jackson.core

ジャクソン-データバインド

2.6.7.1

com.fasterxml.jackson.dataformat

ジャクソン-データフォーマット-CBOR

2.6.7

com.fasterxml.jackson.datatype

ジャクソン-データ型-JODA

2.6.7

com.fasterxml.jackson.module

ジャクソン-モジュール-パラナマー

2.6.7

com.fasterxml.jackson.module

ジャクソンモジュール-Scala.11

2.6.7.1

com.github.fommil (英語)

Jniloader

1.1

com.github.fommil.netlib (英語)

コア

1.1.2

com.github.fommil.netlib (英語)

native_ref-ジャワ

1.1

com.github.fommil.netlib (英語)

native_ref-java-natives

1.1

com.github.fommil.netlib (英語)

native_system-Javaの

1.1

com.github.fommil.netlib (英語)

native_system-java-natives

1.1

com.github.fommil.netlib (英語)

netlib-native_ref-linux-x86_64-natives

1.1

com.github.fommil.netlib (英語)

netlib-native_system-linux-x86_64-natives

1.1

com.github.luben

ZSTD-JNI

1.3.2-2

com.github.rwl です。

jトランスフォーム

2.4.0

com.google.code.findbugs

JSR305

2.0.1

com.google.code.gson(英語)

gson

2.2.4

com.google.guava

グアバ

15.0

com.google.protobuf

protobuf-java

2.6.1

com.googlecode.javaewah

ジャワエワ

0.3.2

com.h2データベース

H2

1.3.174

com.jcraftの

jsch

0.1.50

com.jolboxの

ボーンカップ

0.8.0.リリース

com.microsoft.azure

azure-データレイク-store-sdk

2.2.8

com.microsoft.azure

azure-ストレージ

7.0.0

com.microsoft.sqlserver

mssqlの-JDBC

6.2.2.JRE8

com.ningの

圧縮-LZF

1.0.3

com.sun.mail

javax.mail

1.5.2

com.thoughtworks.paranamer

パラナマー

2.8

com.trueaccord.lensesの

lenses_2.11

0.3

コム。囀る

チルジャワ

0.9.3

コム。囀る

chill_2.11

0.9.3

コム。囀る

寄木細工の hadoop バンドル

1.6.0

コム。囀る

util-app_2.11

6.23.0

コム。囀る

util-core_2.11

6.23.0

コム。囀る

util-jvm_2.11

6.23.0

com.タイプセーフ

コンフィグ

1.2.1

Scala-logging

Scala-logging-api_2.11

2.1.2

Scala-logging

Scala-logging-slf4j_2.11

2.1.2

com.univocityの

univocity-パーサー

2.7.3

com.vlkan

フラットバッファ

1.2.0から3F79E055

com.zaxxerの

ひかりCP

3.1.0

commons-beanutilsの

commons-beanutilsの

1.9.4

コモンズCLI

コモンズCLI

1.2

コモンズコーデック

コモンズコーデック

1.10

コモンズコレクション

コモンズコレクション

3.2.2

コモンズ構成

コモンズ構成

1.6

コモンズ-DBCP

コモンズ-DBCP

1.4

コモンズ消化器

コモンズ消化器

1.8

commons-httpクライアント

commons-httpクライアント

3.1

コモンズ-IO

コモンズ-IO

2.4

コモンズ-ラング

コモンズ-ラング

2.6

コモンズロギング

コモンズロギング

1.1.3

コモンズネット

コモンズネット

3.1

コモンズプール

コモンズプール

1.5.4

info.ganglia.gmetric4j

gmetric4jの

1.0.7

io.エアリフト

エアコンプレッサー

0.10

io.dropwizard.メトリクス

メトリクスコア

3.1.5

io.dropwizard.メトリクス

メトリクス-ガングリア

3.1.5

io.dropwizard.メトリクス

メトリクス-グラファイト

3.1.5

io.dropwizard.メトリクス

メトリクス-healthchecks

3.1.5

io.dropwizard.メトリクス

メトリクス-jetty9

3.1.5

io.dropwizard.メトリクス

メトリクス-JSON

3.1.5

io.dropwizard.メトリクス

メトリクス-JVM

3.1.5

io.dropwizard.メトリクス

メトリクス-log4j

3.1.5

io.dropwizard.メトリクス

メトリクスサーブレット

3.1.5

io.nettyの

網状

3.9.9.ファイナル

io.nettyの

netty-すべて

4.1.42.ファイナル

javax.activationの

アクティベーション

1.1.1

javax.annotation

javax.annotation-api

1.2

javax.el

javax.el-api

2.2.4

javax.jdo

jdo-api

3.0.1

javax.servlet

javax.servlet-api

3.1.0

javax.servlet.jsp

JSPのAPI

2.1

javax.transaction

jta

1.1

javax.validationの

検証API

1.1.0.ファイナル

javax.ws.rs

javax.ws.rs-api

2.0.1

javax.xml.バインド

ヤックスビーAPI

2.2.2

javax.xml.ストリーム

スタックス-API

1.0-2

ジャボリューション

ジャボリューション

5.5.1

ジェイライン

ジェイライン

2.14.6

ジョダタイム

ジョダタイム

2.9.3

ジュニット

ジュニット

4.12

log4j(ログ4J)

apache-log4j-extras

1.2.17

log4j(ログ4J)

log4j(ログ4J)

1.2.17

ネット.ハイドロマティック

固有ベースプロパティ

1.1.5

net.razorvine

パイロライト

4.13

net.sf.jpam (英語)

JPAMの

1.1

net.sf.opencsv

opencsvの

2.3

net.sf.supercsv (英語)

スーパーCSV

2.2.0

ネット.スノーフレーク

snowflake-ingest-sdk

0.9.6

ネット.スノーフレーク

スノーフレーク-JDBC

3.12.0

ネット.スノーフレーク

スパーク-snowflake_2.11

2.5.9-spark_2.4

net.sourceforge.f2j (英語)

arpack_combined_all

0.1

org.acplt

ONCRPCの

1.0.7

org.antlr

ST4の

4.0.4

org.antlr

antlrランタイム

3.4

org.antlr

antlr4ランタイム

4.7

org.antlr

文字列テンプレート

3.2.1

org.apache.ant

1.9.2

org.apache.ant

アントJSCH

1.9.2

org.apache.ant

アントランチャー

1.9.2

org.apache.arrow(アパッチ・アロー)

arrow-format

0.10.0

org.apache.arrow(アパッチ・アロー)

arrow-memory

0.10.0

org.apache.arrow(アパッチ・アロー)

arrow-vector

0.10.0

org.apache.avro

AVRO

1.8.2

org.apache.avro

アブロIPC

1.8.2

org.apache.avro

アブロマップド-hadoop2

1.8.2

org.apache.calcite

方解石-アバチカ

1.2.0-インキュベーション

org.apache.calcite

方解石コア

1.2.0-インキュベーション

org.apache.calcite

方解石-linq4j

1.2.0-インキュベーション

org.apache.commonsの

コモンズ圧縮

1.8.1

org.apache.commonsの

コモンズ-クリプト

1.0.0

org.apache.commonsの

コモンズ-LANG3

3.5

org.apache.commonsの

コモンズ-数学3

3.4.1

org.apache.curator (英語)

キュレーター・クライアント

2.7.1

org.apache.curator (英語)

キュレーターフレームワーク

2.7.1

org.apache.curator (英語)

キュレーターレシピ

2.7.1

org.apache.derbyの

ダービー

10.12.1.1

org.apache.directory.api

API-ASN1-API

1.0.0-M20

org.apache.directory.api

APIのユーティリティ

1.0.0-M20

org.apache.directory.server

apacheds-i18n

2.0.0-M15

org.apache.directory.server

apacheds-kerberos-codec

2.0.0-M15

org.apache.hadoop です。

hadoop アノテーション

2.7.3

org.apache.hadoop です。

hadoop認証

2.7.3

org.apache.hadoop です。

hadoop クライアント

2.7.3

org.apache.hadoop です。

hadoop-共通

2.7.3

org.apache.hadoop です。

Hadoop-HDFS

2.7.3

org.apache.hadoop です。

hadoop-mapreduce-client-アプリ

2.7.3

org.apache.hadoop です。

hadoop-mapreduce-クライアント-共通

2.7.3

org.apache.hadoop です。

hadoop-mapreduce-client-core

2.7.3

org.apache.hadoop です。

hadoop-mapreduce-client-ジョブクライアント

2.7.3

org.apache.hadoop です。

hadoop-mapreduce-client-shuffle

2.7.3

org.apache.hadoop です。

hadoop-yarn-api

2.7.3

org.apache.hadoop です。

hadoop-yarn-クライアント

2.7.3

org.apache.hadoop です。

hadoop-yarn-共通

2.7.3

org.apache.hadoop です。

hadoop-yarn-server-共通

2.7.3

org.apache.htrace

htrace-コア

3.1.0-インキュベーション

org.apache.httpコンポーネント

httpクライアント

4.5.6

org.apache.httpコンポーネント

httpコア

4.4.10

org.apache.ivy

2.4.0

org.apache.orc

オークコアノーハイブ

1.5.5

org.apache.orc

オーク-mapreduce-nohive

1.5.5

org.apache.orc

オークシム

1.5.5

org.apache.parquet

parquet-column

1.10.1.2-データブリックス4

org.apache.parquet

parquet-common

1.10.1.2-データブリックス4

org.apache.parquet

parquet-encoding

1.10.1.2-データブリックス4

org.apache.parquet

parquet-format

2.4.0

org.apache.parquet

parquet-hadoop

1.10.1.2-データブリックス4

org.apache.parquet

parquet-jackson

1.10.1.2-データブリックス4

org.apache.thrift

libfb303の

0.9.3

org.apache.thrift

リブスリフト

0.9.3

org.apache.xbean

xbean-asm6-shaded (英語)

4.8

org.apache.zookeeper

動物園の飼育係

3.4.6

org.codehaus.jackson

ジャクソン-コア-ASL

1.9.13

org.codehaus.jackson

ジャクソン・ジャクサーズ

1.9.13

org.codehaus.jackson

ジャクソン-マッパー-ASL

1.9.13

org.codehaus.jackson

ジャクソン-XC

1.9.13

org.codehaus.janino

commons-コンパイラ

3.0.10

org.codehaus.janino

ジャニーノ

3.0.10

org.datanucleus (英語)

データ核-API-JDO

3.2.6

org.datanucleus (英語)

データ核コア

3.2.10

org.datanucleus (英語)

データ核-RDBMS

3.2.9

組織Eclipse.jetty

桟橋クライアント

9.3.27.v20190418

組織Eclipse.jetty

桟橋の続き

9.3.27.v20190418

組織Eclipse.jetty

桟橋-HTTP

9.3.27.v20190418

組織Eclipse.jetty

桟橋-IO

9.3.27.v20190418

組織Eclipse.jetty

桟橋-JNDI

9.3.27.v20190418

組織Eclipse.jetty

桟橋プラス

9.3.27.v20190418

組織Eclipse.jetty

桟橋プロキシ

9.3.27.v20190418

組織Eclipse.jetty

桟橋警備

9.3.27.v20190418

組織Eclipse.jetty

桟橋サーバー

9.3.27.v20190418

組織Eclipse.jetty

桟橋サーブレット

9.3.27.v20190418

組織Eclipse.jetty

桟橋サーブレット

9.3.27.v20190418

組織Eclipse.jetty

桟橋-util

9.3.27.v20190418

組織Eclipse.jetty

桟橋-webapp

9.3.27.v20190418

組織Eclipse.jetty

桟橋XML

9.3.27.v20190418

org.fusesource.leveldbjni

レベルdbjni-すべて

1.8

org.glassfish.hk2

HK2-API

2.4.0-B34

org.glassfish.hk2

HK2ロケーター

2.4.0-B34

org.glassfish.hk2

hk2-utilsの

2.4.0-B34

org.glassfish.hk2

osgi-リソースロケーター

1.0.1

org.glassfish.hk2.external (英語)

AOPALLIANCE-再パッケージ化

2.4.0-B34

org.glassfish.hk2.external (英語)

javax.inject

2.4.0-B34

org.glassfish.jersey.bundles.repackaged (英語)

ジャージー-グアバ

2.22.2

org.glassfish.jersey.containers

ジャージーコンテナサーブレット

2.22.2

org.glassfish.jersey.containers

ジャージーコンテナサーブレットコア

2.22.2

org.glassfish.jersey.coreの

ジャージークライアント

2.22.2

org.glassfish.jersey.coreの

ジャージー共通

2.22.2

org.glassfish.jersey.coreの

ジャージーサーバー

2.22.2

org.glassfish.jersey.mediaの

ジャージー-メディア-JAXB

2.22.2

org.hamcrest

ハムクレストコア

1.3

org.hamcrest

ハムクレスト-ライブラリ

1.3

org.hibernate

hibernate-validator

5.1.1.ファイナル

org.iq80.snappyの

てきぱき

0.2

org.javassist

ジャバス奏者

3.18.1-GAの

org.jboss.logging

jboss-ロギング

3.1.3.GA

org.jdbi

DBI

2.63.1

org.joda

ジョダ変換

1.7

org.jodd さん

ジョッドコア

3.5.2

org.json4sの

json4s-ast_2.11

3.5.3

org.json4sの

json4s-core_2.11

3.5.3

org.json4sの

json4s-jackson_2.11

3.5.3

org.json4sの

json4s-scalap_2.11

3.5.3

org.lz4

LZ4-Javaの

1.4.0

org.mariadb.JDBC

mariadb-java-クライアント

2.1.2

org.mockitoの

mockito-コア

1.10.19

org.objenesis

オブジェネシス

2.5.1

org.postgresql

PostgreSQL

42.1.4

org.roaringbitmap

ロアリングビットマップ

0.7.45

org.roaringbitmap

シム

0.7.45

org.rocksdbの

ロックスDBJNI

6.2.2

org.rosuda.REngine

レンジン

2.1.0

組織Scala-lang

Scala-compiler_2.11

2.11.12

組織Scala-lang

Scala-Library.11

2.11.12

組織Scala-lang

Scala-reflect_2.11

2.11.12

組織Scala-lang.modules

Scala-parser-combinators_2.11

1.1.0

組織Scala-lang.modules

Scala-xml_2.11

1.0.5

組織Scala-sbt

テストインターフェース

1.0

org.scalacheck

scalacheck_2.11

1.12.5

org.scalactic

scalactic_2.11

3.0.3

org.scalanlp

そよ風-macros_2.11

0.13.2

org.scalanlp

breeze_2.11

0.13.2

org.scalatestの

scalatest_2.11

3.0.3

org.slf4j

jcl-over-slf4j

1.7.16

org.slf4j

7月-slf4j

1.7.16

org.slf4j

SLF4J-APIの

1.7.16

org.slf4j

SLF4J-ログ4J12

1.7.16

org.spark-project.hive です。

ハイブビーライン

1.2.1.スパーク2

org.spark-project.hive です。

ハイブ CLI

1.2.1.スパーク2

org.spark-project.hive です。

ハイブ-JDBC

1.2.1.スパーク2

org.spark-project.hive です。

Hive metastore

1.2.1.スパーク2

org.spark-project.spark です。

未使用

1.0.0

org.spire-math

スパイア-macros_2.11

0.13.0

org.spire-math

spire_2.11

0.13.0

org.springframeworkの

スプリングコア

4.1.4.リリース

org.springframeworkの

スプリングテスト

4.1.4.リリース

org.tukaani

xz

1.5

org.typelevel

machinist_2.11

0.6.1

org.typelevel

マクロ-compat_2.11

1.1.1

org.xerial

sqlite-JDBC の

3.8.11.2

org.xerial.snappy(英語)

スナッピージャワ

1.1.7.3

org.yaml の

スネークヤム

1.16

オロ

オロ

2.0.8

ソフトウェア.Amazon.ion

イオンジャワ

1.0.2

スタックス

スタックス-API

1.0.1

xmlenc

xmlenc

0.52