Databricks Runtime 6.3 (EoS)
この Databricks Runtime バージョンのサポートは終了しました。 サポート終了日については、「 サポート終了の履歴」を参照してください。 サポートされているすべての Databricks Runtime バージョンについては、「 Databricks Runtime リリースノートのバージョンと互換性」を参照してください。
Databricks は 2020 年 1 月にこのバージョンをリリースしました。
次のリリースノートでは、 Databricks Runtime 6.3, powered by Apache Sparkに関する情報を提供しています。
新機能
Delta Lake
このリリースでは、他の処理エンジンからの Delta テーブルの読み取りのサポートと、コンカレンシーの向上が導入されています。 主な機能は次のとおりです。
-
マニフェストファイルを使用した処理エンジンのサポート -Delta Presto とAmazon Athena (パブリックプレビュー)、Snowflake (試験段階)、Redshift Spectrum (試験段階) のScala テーブルをクエリできるようになりました。マニフェストファイルは、 、 、 、Java PythonSQLAPIを使用して生成できます。
-
すべての Delta Lake 操作のコンカレンシーの向上 - より多くの Delta Lake 操作を同時に実行できるようになりました。Delta Lake のオプティミスティック コンカレンシー制御は、競合検出をよりきめ細かくすることで改善されました。これにより、Delta テーブルで複雑なワークフローを簡単に実行できます。例えば：
- 新しいパーティションが追加されている間に、古いパーティションで削除 (GDPR コンプライアンスなど) を同時に実行します。
- 不整合なパーティション セットで更新とマージを同時に実行します。
- ファイル圧縮をアペンドと同時に実行する。
「Databricks での分離レベルと書き込みの競合」を参照してください。
-
ファイル圧縮のサポートの強化 -
DataFrameWriterオプションdataChangeをfalseに設定してファイルを書き換えることで、ファイルを圧縮できるようになりました。 このオプションを使用すると、圧縮操作を他のバッチ操作やストリーミング操作と同時に実行できます。 詳細については、「 ファイルの圧縮 」を参照してください。 -
挿入専用マージのパフォーマンスの向上 - Delta Lake では、挿入句のみを含み、更新句がないマージ操作のパフォーマンスがより最適化されるようになりました。 さらに、Delta Lake では、このような挿入専用マージからの書き込みでは、新しいデータのみがテーブルに追加されるようになります。 そのため、構造化ストリーミングと挿入のみのマージを使用して、データ (ログなど) の継続的な重複排除を実行できるようになりました。 詳細については、「 Delta テーブルに書き込むときのデータ重複除去 」を参照してください。
プロセスの分離が有効になっている場合に許可リストにポートを追加する
この記事には、Databricks が使用していない用語である ホワイトリスト という用語への参照が含まれています。この用語がソフトウェアから削除されると、この記事から削除されます。
クラスターでテーブル ACL や認証情報のパススルーなどのセキュリティ機能を有効にすると、Python Sparkconfigspark.databricks.pyspark.iptable.outbound.whitelisted.ports を許可するポートに設定することで、 プロセスがアクセスできるようにする追加の送信ポートを指定できるようになりました。サポートされている設定値の形式は [port[:port][,port[:port]]...]で、例: 21,22,9000:9999です。 ポートは有効な範囲 (0 から 65535) 内にある必要があります。
Scalaジョブのジョブ出力を無効にする
stdout に出力されるログ出力などのジョブ出力には、20 MB のサイズ制限があります。ドライバからstdoutが返されるのを防ぐことができます
Databricksでは、 spark.databricks.driver.disableScalaOutput Spark構成を次のように設定します。
true 。このフラグは、Scala JAR ジョブと Scala ノートブックのセル出力を制御します。「Databricks 互換の JAR を作成する」を参照してください。
インライン Matplotlib フィギュアが Databricks ノートブックでサポートされるようになりました (パブリック プレビュー)
これで、図を display メソッドに渡さなくても、Matplotlib の図を自動的に表示できるようになりました。 詳細については、 Matplotlibを参照してください。
改善
shutil.copytree今/dbfsのために働いています。- 高同時実行モードのクラスターで構造化ストリーミング 本番運用 ジョブを実行すると、以前に実行されていたジョブが適切に終了しなかったために、ジョブの再起動が失敗することがありました。 前回の実行が確実に停止するようにするには、クラスターで SQL 構成
spark.sql.streaming.stopActiveRunOnRestart trueを設定します。 ストリームを適切に停止できない場合は、15秒後にタイムアウト例外がスローされます。この場合は、クラスターを再起動することをお勧めします。 - インストールされているいくつかのRライブラリをアップグレードしました。 「インストールされている R ライブラリ」を参照してください。
Apache Spark
Databricks Runtime 6.3 には Apache Spark 2.4.4 が含まれています。 このリリースには、Spark のすべての修正と改善が含まれています Databricks Runtime 6.2 (EoS) に含まれており、Spark に対して行われた次の追加のバグ修正と機能強化も含まれています。
- [SPARK-30198][CORE] BytesToBytesMapが内部のlong配列を期待どおりに拡大しない
- [SPARK-29918][SQL] RecordBinaryComparatorは、longと比較した場合にエンディアンをチェックするべきである
- [SPARK-30274][CORE] キーが最大容量に達すると、BytesToBytesMapルックアップが永久にハングしないようにします
- [SPARK-25392][CORE][WEBUI] 履歴サーバーからプールページにアクセスする際のエラーページを防止
- [SPARK-30263] [CORE] spark-submitで無視される非Sparkプロパティの潜在的に機密性の高い値をログに記録しない
- [SPARK-28637][SQL] Thriftserverサポート間隔タイプ
- [SPARK-30238][SQL] ハイブパーティションのプルーニングで文字列型と整数型のみをサポートできる
- [SPARK-30198][CORE] BytesToBytesMapが内部のlong配列を期待どおりに拡大しない
- [SPARK-24666][ML] numIterationsが大きい場合にWord2Vecが生成する無限大ベクトルを修正
- [SPARK-30129][CORE] 認証が成功した後、TransportClientでクライアントのIDを設定する
- [SPARK-30050][SQL]テーブルの分析と名前の変更で、ハイブテーブルのバケット情報を消去しないようにする必要があります
- [SPARK-28152][SQL] MsSqlServerDialectのShortTypeをSMALLINTに、FloatTypeをREALにマッピング
- [SPARK-29971][CORE] のバッファリークを修正
TransportFrameDecoder/TransportCipher - [SPARK-29970][WEBUI] Timelineviewのプリセーブオープン/クローズ状態
- [SPARK-29949][SQL] JSON/CSVデータソースによるタイムスタンプのフォーマットを修正
- [SPARK-27558][CORE] OOM例外で失敗したタスクを正常にクリーンアップ
- [SPARK-29758][SQL] リクエストされた文字列フィールドの切り捨てを修正
json_tuple - [SPARK-29949][SQL] JSON/CSVデータソースによるタイムスタンプのフォーマットを修正
- [SPARK-29936][R] SparkR lintエラーを修正し、lint-r GitHub Actionsを追加
- [SPARK-29904][SQL] JSON/CSVデータソースによるマイクロ秒精度でのタイムスタンプの解析
- [SPARK-29904][SQL] JSON/CSVデータソースによるマイクロ秒精度でのタイムスタンプの解析
- [SPARK-26499][SQL] JdbcUtils.makeGetter が ByteType を処理しない
- [SPARK-29682][SQL] Expand で競合する属性を正しく解決するように修正
- [SPARK-29875][Python][SQL] 非推奨のpyarrow.open_streamの使用を避ける Spark 2.4.x の API
- [SPARK-29850][SQL] 空のテーブルのソートマージ結合でメモリリークを起こさないように修正
- [SPARK-28939][SQL] toRddによって実行されるプランのSQLConfを伝播
メンテナンスの更新
「Databricks Runtime 6.3 メンテナンスの更新」を参照してください。
システム環境
- オペレーティングシステム :Ubuntu 16.04.6 LTSの
- Java : 1.8.0_252
- Scala : 2.11.12
- Python : 3.7.3
- R :Rバージョン3.6.2 (2019-12-12)
- Delta Lake : 0.5.0
Scala 2.12 は Apache Spark 2.4 の試験的な機能として使用できますが、Databricks Runtime 6.3 ではサポートされていません。
このセクションの内容：
インストール済み Python ライブラリ
ライブラリ | バージョン | ライブラリ | バージョン | ライブラリ | バージョン |
|---|---|---|---|---|---|
ASN1暗号 | 0.24.0 | バックコール | 0.1.0 | Boto | 2.49.0 |
ボト3 | 1.9.162 | ボトコア | 1.12.163 | 認証 | 2019.3.9 |
cffi | 1.12.2 | シャルデ | 3.0.4 | 暗号化手法 | 2.6.1 |
サーマルサイクラー | 0.10.0 | シトン | 0.29.6 | デコレータ | 4.4.0 |
docutilsの | 0.14 | イドナ | 2.8 | ipykernel(英語) | 5.1.0 |
アイパイソン | 7.4.0 | ipython-genutils | 0.2.0 | ジェダイ | 0.13.3 |
jmespathの | 0.9.4 | jupyter-クライアント | 5.2.4 | ジュピターコア | 4.4.0 |
キウイソルバー | 1.1.0 | Matplotlib | 3.0.3 | ナムピー | 1.16.2 |
pandas | 0.24.2 | パルソ | 0.3.4 | パッツィ | 0.5.1 |
pexpect | 4.6.0 | ピクルシェア | 0.7.5 | 種 | 19.0.3 |
プロンプトツールキット | 2.0.9 | サイコップ2 | 2.7.6.1 | PTYPROCESSの | 0.6.0 |
ピアロー | 0.13.0 | pycparser | 2.19 | pycurlの | 7.43.0 |
ピグメント | 2.3.1 | PyGObject | 3.20.0 | pyOpenSSLの | 19.0.0 |
pyparsing (英語) | 2.4.6 | PySocks(パイソックス) | 1.6.8 | Python-apt | 1.1.0.b1 + ubuntu0.16.04.5 |
Python-dateutil | 2.8.0 | ピッツ | 2018.9 | ピズム | 18.0.0 |
要求 | 2.21.0 | S3トランスファー | 0.2.1 | Scikit-Learn | 0.20.3 |
scipy(サイピー) | 1.2.1 | シーボーン | 0.9.0 | セットアップツール | 40.8.0 |
6 | 1.12.0 | ssh-import-id | 5.5 | 統計モデル | 0.9.0 |
竜巻 | 6.0.2 | トレイトレット | 4.3.2 | 無人アップグレード | 0.1 |
urllib3 の | 1.24.1 | virtualenv | 16.4.1 | WC幅 | 0.1.7 |
輪 | 0.33.1 |
インストールされている R ライブラリ
ライブラリ | バージョン | ライブラリ | バージョン | ライブラリ | バージョン |
|---|---|---|---|---|---|
aバインド | 1.4-5 | アスクパス | 1.1 | assertthat | 0.2.1 |
バックポート | 1.1.5 | 基 | 3.6.2 | base64enc | 0.1-3 |
BH | 1.69.0-1 | bit | 1.1-14 | ビット64 | 0.9-7 |
ビットプス | 1.0-6 | ブロッブ | 1.2.0 | ブート | 1.3-23 |
醸成 | 1.0-6 | コール | 3.3.2 | 車 | 3.0-4 |
車データ | 3.0-2 | キャレット | 6.0-84 | セルレンジャー | 1.1.0 |
クロン | 2.3-54 | クラス | 7.3-15 | CLI | 1.1.0 |
clipr | 0.7.0 | clisymbolsの | 1.2.0 | クラスター | 2.1.0 |
コードツール | 0.2-16 | カラースペース | 1.4-1 | コモンマーク | 1.7 |
コンパイラ | 3.6.2 | コンフィグ | 0.3 | COVRの | 3.3.2 |
クレヨン | 1.3.4 | クロストーク | 1.0.0 | Curl | 4.2 |
データ.テーブル | 1.12.6 | データセット | 3.6.2 | DBI | 1.0.0 |
dbplirの | 1.4.2 | DESC | 1.2.0 | 開発ツール | 2.2.1 |
ダイジェスト | 0.6.22 | ドエムシー | 1.3.6 | dplyrの | 0.8.3 |
DT | 0.9 | 省略記号 | 0.3.0 | 評 | 0.14 |
ファンシ | 0.4.0 | ファストマップ | 1.0.1 | フォーキャッツ | 0.4.0 |
For each | 1.4.7 | 外国の | 0.8-74 | 鍛える | 0.2.0 |
FSの | 1.3.1 | GBMの | 2.1.5 | ジェネリック | 0.0.2 |
ggplot2の | 3.2.1 | gh | 1.0.1 | ギット2R | 0.26.1 |
glmnet | 2.0-18 | 膠 | 1.3.1 | ガウアー | 0.2.1 |
グラフィックス | 3.6.2 | grDevicesの | 3.6.2 | グリッド | 3.6.2 |
グリッドエクストラ | 2.3 | gsubfnの | 0.7 | GTABLE(GTABLE) | 0.3.0 |
H2O(ヘトヘオ) | 3.26.0.2 | 避難所 | 2.1.1 | HMSの | 0.5.1 |
htmlツール[htmltools] | 0.4.0 | htmlウィジェット | 1.5.1 | httpuv | 1.5.2 |
httr | 1.4.1 | hwriter | 1.3.2 | hwriterPlusの | 1.0-3 |
イニ | 0.3.1 | イプレッド | 0.9-9 | 反復 子 | 1.0.12 |
jsonlite | 1.6 | カーンスムース | 2.23-16 | ラベリング | 0.3 |
あとで | 1.0.0 | 格子 | 0.20-38 | 溶岩 | 1.6.6 |
レイジーバル | 0.2.2 | ライフサイクル | 0.1.0 | リトル | 0.3.9 |
LME4の | 1.1-21 | ルブリデート | 1.7.4 | マグリット | 1.5 |
マッププロジェクト | 1.2.6 | マップ | 3.3.0 | マップツール | 0.9-8 |
質量 | 7.3-51.5 | マトリックス | 1.2-18 | マトリックスモデル | 0.4-1 |
メモ | 1.1.0 | メソッド | 3.6.2 | mgcv | 1.8-31 |
マイム | 0.7 | ミンカ | 1.2.4 | モデルメトリクス | 1.2.2 |
マンセル | 0.5.0 | mvtnorm | 1.0-11 | nlme | 3.1-143 |
NLOPTRの | 1.2.1 | ネット | 7.3-12 | numDerivの | 2016.8-1.1 |
オープンSSL | 1.4.1 | openxlsxの | 4.1.2 | 並列 | 3.6.2 |
pbkrtestの | 0.4-7 | 柱 | 1.4.2 | pkgbuild の | 1.0.6 |
pkgconfig | 2.0.3 | pkg子猫 | 0.1.5 | pkgload(パッケージロード) | 1.0.2 |
plogrの | 0.2.0 | プライル | 1.8.4 | 褒める | 1.0.0 |
プリティユニット | 1.0.2 | pROC | 1.15.3 | プロセスX | 3.4.1 |
製品 | 2018.04.18 | 経過 | 1.2.2 | 約束 | 1.1.0 |
プロト | 1.0.0 | PS | 1.3.0 | ゴロゴロ | 0.3.3 |
クォントレグ | 5.51 | R.メソッドS3 | 1.7.1 | R.oo | 1.22.0 |
R.utilsの | 2.9.0 | R2D3の | 0.2.3 | R6の | 2.4.0 |
ランダムフォレスト | 4.6-14 | ラプディレクトリ | 0.3.1 | rcmdcheckの | 1.3.3 |
RColorブリューワー | 1.1-2 | Rcpp | 1.0.2 | RcppEigen | 0.3.3.5.0 |
RCのURL | 1.95-4.12 | 読み取り | 1.3.1 | readxlの | 1.3.1 |
レシピ | 0.1.7 | 再戦 | 1.0.1 | リモコン | 2.1.0 |
形状変更2 | 1.4.3 | レックス | 1.1.2 | リオ | 0.5.16 |
ラン | 0.4.1 | RODBC | 1.3-16 | リオキシジェン2 | 6.1.1 |
rpart | 4.1-15 | rprojroot さん | 1.3-2 | サーブ | 1.8-6 |
RSQLite (英語) | 2.1.2 | rstudioapi | 0.10 | rversions | 2.0.0 |
秤 | 1.0.0 | セッション情報 | 1.1.1 | shiny | 1.4.0 |
ソースツール | 0.1.7 | SP | 1.3-1 | sparklyr | 1.0.4 |
SparkR | 2.4.5 | スパース M | 1.77 | 空間的 | 7.3-11 |
スプライン | 3.6.2 | sqldf | 0.4-11 | スクエアム | 2017.10-1 |
statmod の | 1.4.32 | 統計 | 3.6.2 | 統計4 | 3.6.2 |
ストリンギ | 1.4.3 | ストリンガー | 1.4.0 | 生存 | 2.44-1.1 |
SYSの | 3.3 | tcltk | 3.6.2 | ティーチングデモ | 2.10 |
テストを | 2.2.1 | ティブル | 2.1.3 | ティディル | 1.0.0 |
ティディセレクト | 0.2.5 | 日時 | 3043.102 | ツール | 3.6.2 |
usethisさん | 1.5.1 | UTF8 | 1.1.4 | ユーティリティ | 3.6.2 |
vctrs | 0.2.0 | viridisライト | 0.3.0 | ウイスカー | 0.4 |
ウィザー | 2.1.2 | XML2の | 1.2.2 | xopen(オーペン) | 1.0.0 |
エクステーブル | 1.8-4 | ヤムラ | 2.2.0 | ジーロット | 0.1.0 |
郵便番号 | 2.0.4 |
インストール済み Java and Scala ライブラリ (Scala 2.11 クラスター版)
グループID | アーティファクト ID | バージョン |
|---|---|---|
アントル | アントル | 2.7.7 |
com.amazonawsの | Amazon-kinesis-client | 1.8.10 |
com.amazonawsの | aws-java-sdk-オートスケール | 1.11.595 |
com.amazonawsの | aws-java-sdk-cloudformation | 1.11.595 |
com.amazonawsの | aws-java-sdk-cloudfront | 1.11.595 |
com.amazonawsの | aws-java-sdk-cloudhsm | 1.11.595 |
com.amazonawsの | aws-java-sdk-cloudsearch(英語) | 1.11.595 |
com.amazonawsの | aws-java-sdk-cloudtrail | 1.11.595 |
com.amazonawsの | aws-java-sdk-cloudwatch | 1.11.595 |
com.amazonawsの | aws-java-sdk-cloudwatchメトリクス | 1.11.595 |
com.amazonawsの | aws-java-sdk-コードデプロイ | 1.11.595 |
com.amazonawsの | aws-java-sdk-cognitoアイデンティティ | 1.11.595 |
com.amazonawsの | aws-java-sdk-cognitosync | 1.11.595 |
com.amazonawsの | aws-java-sdk-configの | 1.11.595 |
com.amazonawsの | aws-java-sdk-コア | 1.11.595 |
com.amazonawsの | aws-java-sdk-データパイプライン | 1.11.595 |
com.amazonawsの | aws-java-sdk-directconnectの | 1.11.595 |
com.amazonawsの | aws-java-sdkディレクトリ | 1.11.595 |
com.amazonawsの | aws-java-sdk-ダイナモDB | 1.11.595 |
com.amazonawsの | aws-java-sdk-ec2 の | 1.11.595 |
com.amazonawsの | aws-java-sdk-ecsの | 1.11.595 |
com.amazonawsの | aws-java-sdk-efs | 1.11.595 |
com.amazonawsの | aws-java-sdk-elasticache | 1.11.595 |
com.amazonawsの | aws-java-sdk-elasticbeanstalk | 1.11.595 |
com.amazonawsの | aws-java-sdk-elasticloadbalancing | 1.11.595 |
com.amazonawsの | aws-java-sdk-elasticトランスコーダー | 1.11.595 |
com.amazonawsの | aws-java-sdk-emr | 1.11.595 |
com.amazonawsの | aws-java-sdk-glacier | 1.11.595 |
com.amazonawsの | aws-java-sdk-グルー | 1.11.595 |
com.amazonawsの | aws-java-sdk-iam | 1.11.595 |
com.amazonawsの | aws-java-sdk-importexport | 1.11.595 |
com.amazonawsの | aws-java-sdk-キネシス | 1.11.595 |
com.amazonawsの | aws-java-sdk-kmsの | 1.11.595 |
com.amazonawsの | aws-java-sdk-ラムダ | 1.11.595 |
com.amazonawsの | aws-java-sdk-logs | 1.11.595 |
com.amazonawsの | aws-java-sdk-機械学習 | 1.11.595 |
com.amazonawsの | aws-java-sdk-opsworks | 1.11.595 |
com.amazonawsの | aws-java-sdk-rds | 1.11.595 |
com.amazonawsの | aws-java-sdk-レッドシフト | 1.11.595 |
com.amazonawsの | aws-java-sdk-ルート53 | 1.11.595 |
com.amazonawsの | aws-java-sdk-s3 の | 1.11.595 |
com.amazonawsの | aws-java-sdk-ses | 1.11.595 |
com.amazonawsの | aws-java-sdk-simpledb | 1.11.595 |
com.amazonawsの | aws-java-sdk-シンプルなワークフロー | 1.11.595 |
com.amazonawsの | aws-java-sdk-snsの | 1.11.595 |
com.amazonawsの | aws-java-sdk-sqs | 1.11.595 |
com.amazonawsの | aws-java-sdk-ssm | 1.11.595 |
com.amazonawsの | aws-java-sdk-storagegateway | 1.11.595 |
com.amazonawsの | aws-java-sdk-sts | 1.11.595 |
com.amazonawsの | aws-java-sdk-サポート | 1.11.595 |
com.amazonawsの | aws-java-sdk-swf-ライブラリ | 1.11.22 |
com.amazonawsの | aws-java-sdk-ワークスペース | 1.11.595 |
com.amazonawsの | jmespath-java | 1.11.595 |
com.carrotsearchの | HPPCの | 0.7.2 |
com.chuusai(英語) | shapeless_2.11 | 2.3.2 |
com.clearspring.アナリティクス | stream | 2.7.0 |
com.databricksの | サーブ | 1.8-3 |
com.databricksの | dbml-local_2.11 | 0.5.0-db8-spark2.4 |
com.databricksの | dbml-local_2.11-tests | 0.5.0-db8-spark2.4 |
com.databricksの | ジェット3t | 0.7.1-0 |
com.databricks.scalapb | compilerplugin_2.11 | 0.4.15-9 |
com.databricks.scalapb | scalapbのruntime_2.11 | 0.4.15-9 |
com.esotericソフトウェア | kryo-shaded(クリョシェード) | 4.0.2 |
com.esotericソフトウェア | ミンログ | 1.3.0 |
com.fasterxmlの | クラスメイト | 1.0.0 |
com.fasterxml.jackson.core | ジャクソン-注釈 | 2.6.7 |
com.fasterxml.jackson.core | ジャクソンコア | 2.6.7 |
com.fasterxml.jackson.core | ジャクソン-データバインド | 2.6.7.1 |
com.fasterxml.jackson.dataformat | ジャクソン-データフォーマット-CBOR | 2.6.7 |
com.fasterxml.jackson.datatype | ジャクソン-データ型-JODA | 2.6.7 |
com.fasterxml.jackson.module | ジャクソン-モジュール-パラナマー | 2.6.7 |
com.fasterxml.jackson.module | ジャクソンモジュール-Scala.11 | 2.6.7.1 |
com.github.fommil (英語) | Jniloader | 1.1 |
com.github.fommil.netlib (英語) | コア | 1.1.2 |
com.github.fommil.netlib (英語) | native_ref-ジャワ | 1.1 |
com.github.fommil.netlib (英語) | native_ref-java-natives | 1.1 |
com.github.fommil.netlib (英語) | native_system-Javaの | 1.1 |
com.github.fommil.netlib (英語) | native_system-java-natives | 1.1 |
com.github.fommil.netlib (英語) | netlib-native_ref-linux-x86_64-natives | 1.1 |
com.github.fommil.netlib (英語) | netlib-native_system-linux-x86_64-natives | 1.1 |
com.github.luben | ZSTD-JNI | 1.3.2-2 |
com.github.rwl です。 | jトランスフォーム | 2.4.0 |
com.google.code.findbugs | JSR305 | 2.0.1 |
com.google.code.gson(英語) | gson | 2.2.4 |
com.google.guava | グアバ | 15.0 |
com.google.protobuf | protobuf-java | 2.6.1 |
com.googlecode.javaewah | ジャワエワ | 0.3.2 |
com.h2データベース | H2 | 1.3.174 |
com.jcraftの | jsch | 0.1.50 |
com.jolboxの | ボーンカップ | 0.8.0.リリース |
com.microsoft.azure | azure-データレイク-store-sdk | 2.2.8 |
com.microsoft.azure | azure-ストレージ | 7.0.0 |
com.microsoft.sqlserver | mssqlの-JDBC | 6.2.2.JRE8 |
com.ningの | 圧縮-LZF | 1.0.3 |
com.sun.mail | javax.mail | 1.5.2 |
com.thoughtworks.paranamer | パラナマー | 2.8 |
com.trueaccord.lensesの | lenses_2.11 | 0.3 |
コム。囀る | チルジャワ | 0.9.3 |
コム。囀る | chill_2.11 | 0.9.3 |
コム。囀る | 寄木細工の hadoop バンドル | 1.6.0 |
コム。囀る | util-app_2.11 | 6.23.0 |
コム。囀る | util-core_2.11 | 6.23.0 |
コム。囀る | util-jvm_2.11 | 6.23.0 |
com.タイプセーフ | コンフィグ | 1.2.1 |
Scala-logging | Scala-logging-api_2.11 | 2.1.2 |
Scala-logging | Scala-logging-slf4j_2.11 | 2.1.2 |
com.univocityの | univocity-パーサー | 2.7.3 |
com.vlkan | フラットバッファ | 1.2.0から3F79E055 |
com.zaxxerの | ひかりCP | 3.1.0 |
commons-beanutilsの | commons-beanutilsの | 1.9.4 |
コモンズCLI | コモンズCLI | 1.2 |
コモンズコーデック | コモンズコーデック | 1.10 |
コモンズコレクション | コモンズコレクション | 3.2.2 |
コモンズ構成 | コモンズ構成 | 1.6 |
コモンズ-DBCP | コモンズ-DBCP | 1.4 |
コモンズ消化器 | コモンズ消化器 | 1.8 |
commons-httpクライアント | commons-httpクライアント | 3.1 |
コモンズ-IO | コモンズ-IO | 2.4 |
コモンズ-ラング | コモンズ-ラング | 2.6 |
コモンズロギング | コモンズロギング | 1.1.3 |
コモンズネット | コモンズネット | 3.1 |
コモンズプール | コモンズプール | 1.5.4 |
info.ganglia.gmetric4j | gmetric4jの | 1.0.7 |
io.エアリフト | エアコンプレッサー | 0.10 |
io.dropwizard.メトリクス | メトリクスコア | 3.1.5 |
io.dropwizard.メトリクス | メトリクス-ガングリア | 3.1.5 |
io.dropwizard.メトリクス | メトリクス-グラファイト | 3.1.5 |
io.dropwizard.メトリクス | メトリクス-healthchecks | 3.1.5 |
io.dropwizard.メトリクス | メトリクス-jetty9 | 3.1.5 |
io.dropwizard.メトリクス | メトリクス-JSON | 3.1.5 |
io.dropwizard.メトリクス | メトリクス-JVM | 3.1.5 |
io.dropwizard.メトリクス | メトリクス-log4j | 3.1.5 |
io.dropwizard.メトリクス | メトリクスサーブレット | 3.1.5 |
io.nettyの | 網状 | 3.9.9.ファイナル |
io.nettyの | netty-すべて | 4.1.42.ファイナル |
javax.activationの | アクティベーション | 1.1.1 |
javax.annotation | javax.annotation-api | 1.2 |
javax.el | javax.el-api | 2.2.4 |
javax.jdo | jdo-api | 3.0.1 |
javax.servlet | javax.servlet-api | 3.1.0 |
javax.servlet.jsp | JSPのAPI | 2.1 |
javax.transaction | jta | 1.1 |
javax.validationの | 検証API | 1.1.0.ファイナル |
javax.ws.rs | javax.ws.rs-api | 2.0.1 |
javax.xml.バインド | ヤックスビーAPI | 2.2.2 |
javax.xml.ストリーム | スタックス-API | 1.0-2 |
ジャボリューション | ジャボリューション | 5.5.1 |
ジェイライン | ジェイライン | 2.14.6 |
ジョダタイム | ジョダタイム | 2.9.3 |
ジュニット | ジュニット | 4.12 |
log4j(ログ4J) | apache-log4j-extras | 1.2.17 |
log4j(ログ4J) | log4j(ログ4J) | 1.2.17 |
ネット.ハイドロマティック | 固有ベースプロパティ | 1.1.5 |
net.razorvine | パイロライト | 4.13 |
net.sf.jpam (英語) | JPAMの | 1.1 |
net.sf.opencsv | opencsvの | 2.3 |
net.sf.supercsv (英語) | スーパーCSV | 2.2.0 |
ネット.スノーフレーク | snowflake-ingest-sdk | 0.9.6 |
ネット.スノーフレーク | スノーフレーク-JDBC | 3.12.0 |
ネット.スノーフレーク | スパーク-snowflake_2.11 | 2.5.9-spark_2.4 |
net.sourceforge.f2j (英語) | arpack_combined_all | 0.1 |
org.acplt | ONCRPCの | 1.0.7 |
org.antlr | ST4の | 4.0.4 |
org.antlr | antlrランタイム | 3.4 |
org.antlr | antlr4ランタイム | 4.7 |
org.antlr | 文字列テンプレート | 3.2.1 |
org.apache.ant | 蟻 | 1.9.2 |
org.apache.ant | アントJSCH | 1.9.2 |
org.apache.ant | アントランチャー | 1.9.2 |
org.apache.arrow(アパッチ・アロー) | arrow-format | 0.10.0 |
org.apache.arrow(アパッチ・アロー) | arrow-memory | 0.10.0 |
org.apache.arrow(アパッチ・アロー) | arrow-vector | 0.10.0 |
org.apache.avro | AVRO | 1.8.2 |
org.apache.avro | アブロIPC | 1.8.2 |
org.apache.avro | アブロマップド-hadoop2 | 1.8.2 |
org.apache.calcite | 方解石-アバチカ | 1.2.0-インキュベーション |
org.apache.calcite | 方解石コア | 1.2.0-インキュベーション |
org.apache.calcite | 方解石-linq4j | 1.2.0-インキュベーション |
org.apache.commonsの | コモンズ圧縮 | 1.8.1 |
org.apache.commonsの | コモンズ-クリプト | 1.0.0 |
org.apache.commonsの | コモンズ-LANG3 | 3.5 |
org.apache.commonsの | コモンズ-数学3 | 3.4.1 |
org.apache.curator (英語) | キュレーター・クライアント | 2.7.1 |
org.apache.curator (英語) | キュレーターフレームワーク | 2.7.1 |
org.apache.curator (英語) | キュレーターレシピ | 2.7.1 |
org.apache.derbyの | ダービー | 10.12.1.1 |
org.apache.directory.api | API-ASN1-API | 1.0.0-M20 |
org.apache.directory.api | APIのユーティリティ | 1.0.0-M20 |
org.apache.directory.server | apacheds-i18n | 2.0.0-M15 |
org.apache.directory.server | apacheds-kerberos-codec | 2.0.0-M15 |
org.apache.hadoop です。 | hadoop アノテーション | 2.7.3 |
org.apache.hadoop です。 | hadoop認証 | 2.7.3 |
org.apache.hadoop です。 | hadoop クライアント | 2.7.3 |
org.apache.hadoop です。 | hadoop-共通 | 2.7.3 |
org.apache.hadoop です。 | Hadoop-HDFS | 2.7.3 |
org.apache.hadoop です。 | hadoop-mapreduce-client-アプリ | 2.7.3 |
org.apache.hadoop です。 | hadoop-mapreduce-クライアント-共通 | 2.7.3 |
org.apache.hadoop です。 | hadoop-mapreduce-client-core | 2.7.3 |
org.apache.hadoop です。 | hadoop-mapreduce-client-ジョブクライアント | 2.7.3 |
org.apache.hadoop です。 | hadoop-mapreduce-client-shuffle | 2.7.3 |
org.apache.hadoop です。 | hadoop-yarn-api | 2.7.3 |
org.apache.hadoop です。 | hadoop-yarn-クライアント | 2.7.3 |
org.apache.hadoop です。 | hadoop-yarn-共通 | 2.7.3 |
org.apache.hadoop です。 | hadoop-yarn-server-共通 | 2.7.3 |
org.apache.htrace | htrace-コア | 3.1.0-インキュベーション |
org.apache.httpコンポーネント | httpクライアント | 4.5.6 |
org.apache.httpコンポーネント | httpコア | 4.4.10 |
org.apache.ivy | 蔦 | 2.4.0 |
org.apache.orc | オークコアノーハイブ | 1.5.5 |
org.apache.orc | オーク-mapreduce-nohive | 1.5.5 |
org.apache.orc | オークシム | 1.5.5 |
org.apache.parquet | parquet-column | 1.10.1.2-データブリックス4 |
org.apache.parquet | parquet-common | 1.10.1.2-データブリックス4 |
org.apache.parquet | parquet-encoding | 1.10.1.2-データブリックス4 |
org.apache.parquet | parquet-format | 2.4.0 |
org.apache.parquet | parquet-hadoop | 1.10.1.2-データブリックス4 |
org.apache.parquet | parquet-jackson | 1.10.1.2-データブリックス4 |
org.apache.thrift | libfb303の | 0.9.3 |
org.apache.thrift | リブスリフト | 0.9.3 |
org.apache.xbean | xbean-asm6-shaded (英語) | 4.8 |
org.apache.zookeeper | 動物園の飼育係 | 3.4.6 |
org.codehaus.jackson | ジャクソン-コア-ASL | 1.9.13 |
org.codehaus.jackson | ジャクソン・ジャクサーズ | 1.9.13 |
org.codehaus.jackson | ジャクソン-マッパー-ASL | 1.9.13 |
org.codehaus.jackson | ジャクソン-XC | 1.9.13 |
org.codehaus.janino | commons-コンパイラ | 3.0.10 |
org.codehaus.janino | ジャニーノ | 3.0.10 |
org.datanucleus (英語) | データ核-API-JDO | 3.2.6 |
org.datanucleus (英語) | データ核コア | 3.2.10 |
org.datanucleus (英語) | データ核-RDBMS | 3.2.9 |
組織Eclipse.jetty | 桟橋クライアント | 9.3.27.v20190418 |
組織Eclipse.jetty | 桟橋の続き | 9.3.27.v20190418 |
組織Eclipse.jetty | 桟橋-HTTP | 9.3.27.v20190418 |
組織Eclipse.jetty | 桟橋-IO | 9.3.27.v20190418 |
組織Eclipse.jetty | 桟橋-JNDI | 9.3.27.v20190418 |
組織Eclipse.jetty | 桟橋プラス | 9.3.27.v20190418 |
組織Eclipse.jetty | 桟橋プロキシ | 9.3.27.v20190418 |
組織Eclipse.jetty | 桟橋警備 | 9.3.27.v20190418 |
組織Eclipse.jetty | 桟橋サーバー | 9.3.27.v20190418 |
組織Eclipse.jetty | 桟橋サーブレット | 9.3.27.v20190418 |
組織Eclipse.jetty | 桟橋サーブレット | 9.3.27.v20190418 |
組織Eclipse.jetty | 桟橋-util | 9.3.27.v20190418 |
組織Eclipse.jetty | 桟橋-webapp | 9.3.27.v20190418 |
組織Eclipse.jetty | 桟橋XML | 9.3.27.v20190418 |
org.fusesource.leveldbjni | レベルdbjni-すべて | 1.8 |
org.glassfish.hk2 | HK2-API | 2.4.0-B34 |
org.glassfish.hk2 | HK2ロケーター | 2.4.0-B34 |
org.glassfish.hk2 | hk2-utilsの | 2.4.0-B34 |
org.glassfish.hk2 | osgi-リソースロケーター | 1.0.1 |
org.glassfish.hk2.external (英語) | AOPALLIANCE-再パッケージ化 | 2.4.0-B34 |
org.glassfish.hk2.external (英語) | javax.inject | 2.4.0-B34 |
org.glassfish.jersey.bundles.repackaged (英語) | ジャージー-グアバ | 2.22.2 |
org.glassfish.jersey.containers | ジャージーコンテナサーブレット | 2.22.2 |
org.glassfish.jersey.containers | ジャージーコンテナサーブレットコア | 2.22.2 |
org.glassfish.jersey.coreの | ジャージークライアント | 2.22.2 |
org.glassfish.jersey.coreの | ジャージー共通 | 2.22.2 |
org.glassfish.jersey.coreの | ジャージーサーバー | 2.22.2 |
org.glassfish.jersey.mediaの | ジャージー-メディア-JAXB | 2.22.2 |
org.hamcrest | ハムクレストコア | 1.3 |
org.hamcrest | ハムクレスト-ライブラリ | 1.3 |
org.hibernate | hibernate-validator | 5.1.1.ファイナル |
org.iq80.snappyの | てきぱき | 0.2 |
org.javassist | ジャバス奏者 | 3.18.1-GAの |
org.jboss.logging | jboss-ロギング | 3.1.3.GA |
org.jdbi | DBI | 2.63.1 |
org.joda | ジョダ変換 | 1.7 |
org.jodd さん | ジョッドコア | 3.5.2 |
org.json4sの | json4s-ast_2.11 | 3.5.3 |
org.json4sの | json4s-core_2.11 | 3.5.3 |
org.json4sの | json4s-jackson_2.11 | 3.5.3 |
org.json4sの | json4s-scalap_2.11 | 3.5.3 |
org.lz4 | LZ4-Javaの | 1.4.0 |
org.mariadb.JDBC | mariadb-java-クライアント | 2.1.2 |
org.mockitoの | mockito-コア | 1.10.19 |
org.objenesis | オブジェネシス | 2.5.1 |
org.postgresql | PostgreSQL | 42.1.4 |
org.roaringbitmap | ロアリングビットマップ | 0.7.45 |
org.roaringbitmap | シム | 0.7.45 |
org.rocksdbの | ロックスDBJNI | 6.2.2 |
org.rosuda.REngine | レンジン | 2.1.0 |
組織Scala-lang | Scala-compiler_2.11 | 2.11.12 |
組織Scala-lang | Scala-Library.11 | 2.11.12 |
組織Scala-lang | Scala-reflect_2.11 | 2.11.12 |
組織Scala-lang.modules | Scala-parser-combinators_2.11 | 1.1.0 |
組織Scala-lang.modules | Scala-xml_2.11 | 1.0.5 |
組織Scala-sbt | テストインターフェース | 1.0 |
org.scalacheck | scalacheck_2.11 | 1.12.5 |
org.scalactic | scalactic_2.11 | 3.0.3 |
org.scalanlp | そよ風-macros_2.11 | 0.13.2 |
org.scalanlp | breeze_2.11 | 0.13.2 |
org.scalatestの | scalatest_2.11 | 3.0.3 |
org.slf4j | jcl-over-slf4j | 1.7.16 |
org.slf4j | 7月-slf4j | 1.7.16 |
org.slf4j | SLF4J-APIの | 1.7.16 |
org.slf4j | SLF4J-ログ4J12 | 1.7.16 |
org.spark-project.hive です。 | ハイブビーライン | 1.2.1.スパーク2 |
org.spark-project.hive です。 | ハイブ CLI | 1.2.1.スパーク2 |
org.spark-project.hive です。 | ハイブ-JDBC | 1.2.1.スパーク2 |
org.spark-project.hive です。 | Hive metastore | 1.2.1.スパーク2 |
org.spark-project.spark です。 | 未使用 | 1.0.0 |
org.spire-math | スパイア-macros_2.11 | 0.13.0 |
org.spire-math | spire_2.11 | 0.13.0 |
org.springframeworkの | スプリングコア | 4.1.4.リリース |
org.springframeworkの | スプリングテスト | 4.1.4.リリース |
org.tukaani | xz | 1.5 |
org.typelevel | machinist_2.11 | 0.6.1 |
org.typelevel | マクロ-compat_2.11 | 1.1.1 |
org.xerial | sqlite-JDBC の | 3.8.11.2 |
org.xerial.snappy(英語) | スナッピージャワ | 1.1.7.3 |
org.yaml の | スネークヤム | 1.16 |
オロ | オロ | 2.0.8 |
ソフトウェア.Amazon.ion | イオンジャワ | 1.0.2 |
スタックス | スタックス-API | 1.0.1 |
xmlenc | xmlenc | 0.52 |