メインコンテンツまでスキップ

Databricks Runtime 10.0 (EoS)

注記

この Databricks Runtime バージョンのサポートは終了しました。 サポート終了日については、「 サポート終了の履歴」を参照してください。 サポートされているすべての Databricks Runtime バージョンについては、「 Databricks Runtime リリースノートのバージョンと互換性」を参照してください。

次のリリースノートは、Databricks Runtime Databricks RuntimePhotonApache Spark3.2.0を搭載した 10.0および 10.0 に関する情報を提供します。Databricks は 2021 年 10 月にこのバージョンをリリースしました。 Photon は パブリック プレビュー段階です。

新機能と改善点​

Apache Spark の新しいバージョン​

Databricks Runtime 10.0 と Databricks Runtime 10.0 Photon には、Apache Spark 3.2.0 が含まれています。 詳細については、「 Apache Spark」を参照してください。

SELECT 文で、ウィンドウ関数の結果をフィルタするための QUALIFY 句がサポートされるようになりました​

SELECT ステートメントで QUALIFY 句がサポートされるようになりました。QUALIFY を使用して、ウィンドウ関数の結果をフィルター処理できます。 1 つ以上のウィンドウ関数が SELECT リストまたは QUALIFY 条件に存在する必要があります。 例えば：

SQL
SELECT * FROM t QUALIFY SUM(c2) OVER (PARTITION BY c1) > 0;

JDK 11 のクラスターのサポート (パブリック プレビュー)​

Databricks では、 Java Development Kit (JDK) 11 のクラスター サポートが提供されるようになりました。

クラスターを作成するときに、クラスターでJDK 11(ドライバとエグゼキューターの両方)を使用するように指定できます。 これを行うには、次の環境変数を [Advanced Options] > Spark > [環境変数 ] に追加します。

Bash
JNAME=zulu11-ca-amd64

Auto Loader では、スキーマが null 許容として扱われるようになりました​

Auto Loader では、推論されたすべてのスキーマとユーザー指定のスキーマがデフォルトによって null 許容として扱われるようになりました。 これは、データに null 非許容列の null フィールドが含まれている場合に発生する可能性のあるデータ破損を回避するためです。 この動作を追跡するために、新しい構成 spark.databricks.cloudFiles.schema.forceNullableが導入されています。 デフォルトでは、この設定には spark.sql.streaming.fileSource.schema.forceNullableの設定が含まれており、Apache Spark の FileStreamSource が使用され、デフォルトでは true に設定されています。

破壊的変更​

すべての Spark SQL ユーザーに対する重大な変更​

  • 新しい spark.databricks.behaviorChange.SC78546CorrelatedPredicate.enabled 設定: trueに設定すると、サブクエリが集約されるときに、相関等価述部のサブセットが許可されます。 デフォルト設定は trueです。
  • 新しい spark.databricks.behaviorChange.SC82201BlockAutoAlias.enabled 設定: trueに設定すると、ビューの作成時にエイリアスの自動生成がブロックされます。 デフォルト設定は trueです。
  • 新しい spark.databricks.behaviorChange.SC81078CTASWithLocation.enabled 設定: trueに設定すると、空でない場所の CREATE TABLE AS SELECT が許可されなくなります。 デフォルト設定は trueです。 spark.sql.legacy.allowNonEmptyLocationInCTAS も trueに設定されている場合、この設定は効果がなく、空でない場所のCREATE TABLE AS SELECTは常に許可されることに注意してください。

ANSI モードを有効にする Spark SQL ユーザー向けの互換性に影響する変更​

ANSI モードに関する情報については、Databricks Runtimeの ANSI コンプライアンスを参照してください。

  • 新しいspark.databricks.behaviorChange.SC83587NextDayDOW.enabled設定: trueに設定すると、next_day関数の無効なdayOfWeek引数がANSIモードでIllegalArgumentExceptionをスローします。それ以外の場合は、null.デフォルト設定は trueです。

  • 新しい spark.databricks.behaviorChange.SC83796CanCast.enabled 設定: trueに設定すると、ANSI モードで新しい明示的なキャスト構文ルールが有効になります。 デフォルト設定は trueです。

  • 新しいspark.databricks.behaviorChange.SC79099CastStringToBoolean.enabled設定: trueに設定すると、文字列を Booleanにキャストするときに解析エラー例外がスローされます。それ以外の場合は、nullを返します。 デフォルト設定は trueです。

  • 新しい spark.databricks.behaviorChange.SC79064AbsOutsideRange.enabled 設定: trueに設定すると、入力が範囲外の場合、 abs 関数は例外をスローします。 デフォルト設定は trueです。

すべての Python ユーザー向けの重大な変更​

  • Python API delta.tables.DeltaTable.convertToDelta 、Delta Lake コマンドの実行に使用できる正しい DeltaTable Python オブジェクトを返すようになりました。 以前は、直接呼び出すことができなかった内部オブジェクトを返していました。

ライブラリのアップグレード​

Apache Hadoop 3 のアップグレード​

  • Databricks Runtime 10.0 では、Hadoop の依存関係が Hadoop 2.7.4 から Hadoop 3.3.1 にアップグレードされます。

動作の変更​

  • Hadoop3 では、hadoop-common ライブラリの代わりにhadoop-client-apiライブラリと hadoop-client-runtime ライブラリを使用し、Hadoop パブリックAPI または拡張機能で使用される可能性のある特定のサードパーティの依存関係を除外します。

  • Hadoop 2 から 3 つの構成オプションが変更され Hadoop 。 Hadoop 3.3.1 のオプションについては、 core-デフォルト.xmlを参照してください。

  • Databricks では、 Hadoop 3 のデフォルト設定の一部が Hadoop 2 と一致するように更新され、ストレージコネクタのデフォルト認証設定とパフォーマンスレベルが同じであることを確認しました。

    • fs.azure.authorization.caching.enable = false
    • fs.s3a.attempts.maximum = 10
    • fs.s3a.block.size = 67108864
    • fs.s3a.connection.timeout = 50000
    • fs.s3a.max.total.tasks = 1000
    • fs.s3a.retry.limit = 20
    • fs.s3a.retry.throttle.interval = 500ms
    • fs.s3a.assumed.role.credentials.provider = com.amazonaws.auth.InstanceProfileCredentialsProvider
    • fs.s3a.aws.credentials.provider = BasicAWSCredentialsProvider, DatabricksInstanceProfileCredentialsProvider, EnvironmentVariableCredentialsProvider, AnonymousAWSCredentialsProvider

  • Google Cloud Storage (GCS) コネクタが 2.1.6 からアップグレードされました を 2.2.2 に設定します。

  • Amazon Redshift コネクタは、 s3a:// スキームを使用するようになりました。 s3n://スキームは廃止されました。

  • Amazon S3 MetadataStore API の OSS クラス名と、影付きのクラスを処理します。 これにより、影付きのクラス名を必要とせずに OSS 構成を処理できます。

    • たとえば、Hadoop 構成で org.apache.hadoop.fs.s3a.s3guard.NullMetadataStore クラスを指定できます。

  • new Configuration()とsparkContext.hadoopConfigurationの一貫性を確保します。

    • これで、新しい Hadoop 設定が作成されるたびに、Databricks Runtime の sparkContext.hadoopConfiguration で事前定義された Hadoop 設定 (ファイルシステムスキームとそのデフォルト設定など) と一貫性を持つようになります。

  • Databricks Runtime に含まれる Hadoop ストレージ コネクタは Hadoop 3.3.1 と完全に互換性がありますが、 OSS Hadoop 3.3.1 コネクタと同期しているとは限らず、動作が異なる場合があります。

    • Amazon S3 コネクタでは、(警告はありますが) 引き続きユーザーが許可されます S3 URLでの認証と、 それを削除するHADOOP-14833 と比較します。

  • globStatus が常にソートされた結果を返すようになりました（HADOOP-10798

  • fs.s3a.endpoint が未設定で、fs.s3a.endpoint region が null の場合に追加されました（SPARK-35878

    • Databricks が提供する Amazon S3 リージョンの自動解決は、グローバルエンドポイントが設定されているため、場合によってはトリガーされないことがあります。 AWS SDK はリージョンを正しく解決するため、これは問題ではありません。

  • fs.s3a.downgrade.syncable.exceptions が設定されていない場合は追加します(SPARK-35868)

  • LZ4 および Snappy コーデックがネイティブの Hadoop ライブラリに依存しない (HADOOP-17125)

既知の問題​

  • スパーク-36681 SnappyCodecを使用してシーケンスファイルを書き込むと、Hadoop 3.3.1の既知の問題によりUnsatisfiedLinkErrorで失敗します（HADOOP-17891)

Apache Spark​

Databricks Runtime 10.0 には Apache Spark 3.2.0 が含まれています。

このセクションの内容：

ハイライト​

  • PySpark上のPandas APIレイヤーをサポート（SPARK-34849
  • EventTimeベースのセッション化(セッションウィンドウ)(SPARK-10816)
  • ANSI SQL INTERVALタイプをサポート（SPARK-27790
  • ANSIモードGA(SPARK-35030)
  • Spark での例外メッセージの標準化 (SPARK-33539)

Core と Spark SQL​

ANSI SQL 互換性の強化​

  • ANSI SQL INTERVALタイプをサポート（SPARK-27790
  • ANSI モードでの新しい型強制構文ルール (SPARK-34246)

パフォーマンスの強化​

  • クエリの最適化

    • オプティマイザーで冗長なアグリゲートを削除します(SPARK-33122)
    • 結合したプロジェクトによる制限のプッシュダウン (SPARK-34622)
    • 和集合、ソート、および範囲演算子のカーディナリティ推定 (SPARK-33411)
    • UnwrapCastInBinaryComparison の In/InSet 述語のサポート (SPARK-35316)
    • パーティションプルーニング後に必要な統計を保持する（SPARK-34119〉

  • クエリの実行

    • デフォルトで Zstandard バッファー プールを有効にする (SPARK-34340、 SPARK-34390)
    • ソートマージ結合のすべての結合タイプに code-gen を追加 (SPARK-34705)
    • ブロードキャストネストループ結合の改善（SPARK-34706
    • 最終ハッシュ集約のための 2 レベルのハッシュマップのサポート (SPARK-35141)
    • 動的パーティションとバケットテーブルの書き込みに並列ライターを許可する（SPARK-26164)
    • ThriftserverでのFETCH_PRIOR処理のパフォーマンスを改善（SPARK-33655

コネクタの機能強化​

  • PARQUET

    • Parquet を 1.12.1 にアップグレード (SPARK-36726)
    • Parquet で int32 物理型として格納されている read.parquet 符号なし型 (SPARK-34817)
    • 符号付き int64 物理型として decimal(20, 0) に格納された unsigned int64 論理型read.parquet (SPARK-34786)
    • フィルタープッシュダウンの Parquet を改善します(SPARK-32792)

  • ORC

    • ORCのバージョン1.6.11へのアップグレード（SPARK-36482
    • ORC強制位置進化をサポート(SPARK-32864)
    • ORCベクトル化リーダーのネストされた列のサポート(SPARK-34862)
    • ORC データソースで ZSTD および LZ4 圧縮をサポート (SPARK-33978, SPARK-35612)

  • AVRO

    • Avro をバージョン 1.10.2 にアップグレード (SPARK-34778)
    • "avro.schema.literal" を使用したパーティション分割された テーブルの スキーマ進化のサポート (AvroHiveSPARK-26836)
    • 読み取りで日付時刻のリベースを制御するための新しい Avro データソースオプションを追加 (SPARK-34404)
    • Avro でのユーザー指定スキーマ URL のサポートの追加(SPARK-34416)
    • 位置 Catalyst-to-Avro スキーマ マッチングのサポートを追加 (SPARK-34365)

  • JSON

    • Jackson をバージョン 2.12.3 にアップグレード (SPARK-35550)
    • JSONデータソースが非ASCII文字をコードポイントとして書き込むことを許可する（SPARK-35047)

  • JDBC

    • JDBCRelationでより正確なパーティションストライドを計算（SPARK-34843）

  • not-inによるHive metastoreフィルタ対応(SPARK-34538)

機能の強化​

  • サブクエリ

  • 新しい組み込み関数

  • デフォルトで Apache Hadoop 3.3.1 を使用 (SPARK-29250)

  • シャッフルブロックのチェックサムを追加（SPARK-35275〉

  • デフォルトでspark.storage.replication.proactiveを有効にする（SPARK-33870）

  • SparkContext の停止中のフォールバック ストレージ クリーンアップのサポート (SPARK-34142)

  • データセット からの 列挙型のサポートJavaScalaAPI (SPARK-23862)

  • ツタ座標を持つ ADD JAR は、Hive の推移的な動作と互換性がある必要があります (SPARK-34506)

  • ADD ARCHIVE コマンドと LIST ARCHIVES コマンドのサポート (SPARK-34603)

  • ADD FILE/JAR/ARCHIVE コマンドの複数のパスをサポート (SPARK-35105)

  • 構文 CREATE FUNCTION USING するためのリソースとしてアーカイブ ファイルをサポートする (SPARK-35236)

  • ServiceLoader からの SparkSessionExtensions の読み込み (SPARK-35380)

  • 関数に文関数を追加します。{Scala,py}(スパーク-35418)

  • spark.sql.hive.metastorePartitionPruningを適用する パーティション管理に を使用する非 テーブルの場合 (Hive Hive metastoreSPARK-36128)

  • exec の損失の理由を Web UI に伝播します (SPARK-34764)

  • 非決定論的な With-CTE のインライン化を避ける (SPARK-36447)

  • 特定のデータベース内のすべてのテーブルの分析をサポート (SPARK-33687)

  • Spark での例外メッセージの標準化 (SPARK-33539)

  • サポート (IGNORE |RESPECT) リード/ラグ/NTH_VALUE/FIRST_VALUE/LAST_VALUEのヌル (SPARK-30789)

その他の注目すべき変更点​

  • モニタリング

    • ExternalShuffleService の新しいメトリクス (SPARK-35258)
    • 新しいステージ レベルの REST API とパラメーターを追加 (SPARK-26399)
    • サポートタスクとエグゼキューターのメトリクスの分布 REST APIのメトリクスの分布(SPARK-34488)
    • ハッシュ集約のフォールバックメトリクスを追加（SPARK-35529）

  • データセット#summaryにオプションとしてcount_distinctを追加（SPARK-34165)

  • sql/core での ScriptTransform の実装 (SPARK-31936)

  • BlockManagerMaster ドライバーのハートビートタイムアウトを設定可能にする (SPARK-34278)

  • シャッフルサービス名をクライアント側で設定可能にし、サーバー側でクラスパスベースの設定オーバーライドを可能にする（SPARK-34828

  • ExecutorMetricsPoller は、ハートビートが発生するまでステージエントリを stageTCMP に保持する必要がある（SPARK-34779

  • RewriteDistinctAggregates の if をフィルター句に置き換える (SPARK-34882)

  • 自己結合で CostBasedJoinReorder を適用するときの失敗を修正 (SPARK-34354)

  • CREATE TABLE LIKE 予約済みテーブルのプロパティを尊重する必要があります (SPARK-34935)

  • YARN クラスター モードで ivySettings ファイルをドライバーに出荷する（SPARK-34472

  • USING/NATURAL JOIN から重複する共通列を解決します (SPARK-34527)

  • describe table cmd の内部ビュープロパティを非表示にする (SPARK-35318)

  • 分散/クラスターのための欠落している属性の解決をサポート/再パーティションヒント（SPARK-35331

  • FileStreamSink.hasMetadata のパスを確認するときにエラーを無視する (SPARK-34526)

  • 不足している設定を推論することで、s3a マジックコミッターのサポートを改善します（SPARK-35383

  • STRUCT 型文字列で : を省略できます (SPARK-35706)

  • AQE が安全に最適化できるかどうかを区別するための新しい演算子を追加 (SPARK-35786)

  • null を埋めて unionByName をソートするのではなく、新しいネストされた構造体フィールドを追加(SPARK-35290)

  • ArraysZip は、アナライザー/オプティマイザーによって書き換えられるのを避けるために、フィールド名を保持する必要があります (SPARK-35876)

  • NullType の型名として Void を使用（SPARK-36224

  • FileCommitProtocol に新しい API を導入し、柔軟なファイル命名を実現 (SPARK-33298)

挙動の変更​

各コンポーネントの移行ガイドを参照してください: Spark Core。

構造化ストリーミング​

主な特長​

  • EventTimeベースのセッション化(セッションウィンドウ)(SPARK-10816)
  • Kafka クライアントを 2.8.0 にアップグレード (SPARK-33913)
  • Scala の複数のバッチで Trigger.Once などのストリーミングクエリを実行するための Trigger.AvailableNow (SPARK-36533)

その他の注目すべき変更点​

  • トリガーごとに読み取るレコードの最小数を指定する新しいオプションを Kafka ソースに導入 (SPARK-35312)
  • ソースの進行状況に最新のオフセットを追加（SPARK-33955

PySparkの​

プロジェクトゼン​

  • Spark 上の Pandas API (SPARK-34849)

  • Pythonワーカーのfaulthanlderサポートがクラッシュしました（SPARK-36062

  • 関数 API全体で Snake 命名規則を使用する (SPARK-34306)

  • spark.sql.execution を有効にします。PySpark.udf.simplifiedTraceback.enabled by デフォルト(SPARK-35419)

  • データフレーム の作成時にネストされた dict を構造体として推論するサポート (SPARK-35929)

その他の注目すべき変更点​

  • デフォルトでピン留めスレッドモードを有効にする（SPARK-35303
  • Arrow 実行の NullType サポートを追加 (SPARK-33489)
  • toPandas への Arrow self_destruct のサポートの追加 (SPARK-32953)
  • APIPySparkピン留めスレッドモード用のスレッドターゲットラッパー を追加（SPARK-35498

挙動の変更​

移行ガイドを参照してください。

MLlib​

パフォーマンスの向上​

  • BucketedRandomProjectionLSH 変換の最適化 (SPARK-34220)
  • w2v findSynonyms 最適化 (SPARK-34189)
  • 境界チェックをスキップしてスパース GEMM を最適化 (SPARK-35707)
  • GEMVによるML ALS recommendForAllの性能改善（SPARK-33518

モデル トレーニングの機能強化​

  • ロジスティックアグリゲーターのリファクタリング - 仮想センタリングのサポート (SPARK-34797)
  • 切片サポートセンタリングによるバイナリロジスティック回帰(SPARK-34858、 SPARK-34448)
  • 切片サポートセンタリングによる多項ロジスティック回帰(SPARK-34860)

BLASの改善​

  • 完全に com.github.fommil.netlib を dev.ludovic.netlib:2.0 に置き換えます(SPARK-35295)
  • ベクトル化された BAS 実装を追加 (SPARK-33882)
  • dev.ludovic.netlib によるフォールバック BAS の高速化 (SPARK-35150)

その他の注目すべき変更点​

  • OVR 変換で潜在的な列の競合が修正されます (SPARK-34356)

廃止と削除​

  • spark.launcher.childConnectionTimeoutを廃止します(SPARK-33717)
  • deprecate グループ BY ...GROUPING SETS (...) と promote グループ BY GROUPING SETS (...)(スパーク-34932)
  • ps.broadcast API の廃止 (SPARK-35810)
  • num_files引数を非推奨にする(SPARK-35807)
  • データフレーム.to_spark_ioの廃止(SPARK-35811)

メンテナンスの更新​

「Databricks Runtime 10.0 メンテナンスの更新」を参照してください。

システム環境​

  • オペレーティングシステム :Ubuntu 20.04.3 LTS
  • Java の:Zulu 8.56.0.21-CA-linux64
  • Scala : 2.12.14
  • Pythonの :3.8.10
  • R :4.1.1
  • Delta Lake : 1.0.0

インストール済み Python ライブラリ​

ライブラリ

バージョン

ライブラリ

バージョン

ライブラリ

バージョン

アンテルゴス Linux

2015.10 (ISOローリング)

appdirs (英語)

1.4.4

バックコール

0.2.0

ボト3

1.16.7

ボトコア

1.19.7

認証

2020.12.5

シャルデ

4.0.0

サーマルサイクラー

0.10.0

シトン

0.29.23

DBUSPython

1.2.16

デコレータ

5.0.6

ディストリビューション

0.3.3

ディストリビューション情報

0.23Ubuntuの1

facets-概要

1.0.0

ファイルロック

3.0.12

イドナ

2.10

ipykernel(英語)

5.3.4

アイパイソン

7.22.0

ipython-genutils

0.2.0

ジェダイ

0.17.2

jmespathの

0.10.0

ジョブリブ

1.0.1

jupyter-クライアント

6.1.12

ジュピターコア

4.7.1

キウイソルバー

1.3.1

koalas

1.8.1

Matplotlib

3.4.2

ナムピー

1.19.2

pandas

1.2.4

パルソ

0.7.0

パッツィ

0.5.1

pexpect

4.8.0

ピクルシェア

0.7.5

枕

8.2.0

種

21.0.1

Plotly

5.1.0

プロンプトツールキット

3.0.17

プロトブフ

3.17.2

サイコップ2

2.8.5

PTYPROCESSの

0.7.0

ピアロー

4.0.0

ピグメント

2.8.1

PyGObject

3.36.0

pyparsing (英語)

2.4.7

Python-apt

2.0.0 + ubuntu0.20.4.6

Python-dateutil

2.8.1

ピッツ

2020.5

ピズム

20.0.0

要求

2.25.1

リクエスト-unixsocket

0.2.0

S3トランスファー

0.3.7

Scikit-Learn

0.24.1

scipy(サイピー)

1.6.2

シーボーン

0.11.1

セットアップツール

52.0.0

6

1.15.0

ssh-import-id

5.10

統計モデル

0.12.2

持久力

8.0.1

スレッドプールctl

2.1.0

竜巻

6.1

トレイトレット

5.0.5

無人アップグレード

0.1

urllib3 の

1.25.11

virtualenv

20.4.1

WC幅

0.2.5

輪

0.36.2

インストールされている R ライブラリ​

R ライブラリは、2021 年 9 月 21 日の Microsoft CRAN スナップショットからインストールされます。

ライブラリ

バージョン

ライブラリ

バージョン

ライブラリ

バージョン

アスクパス

1.1

assertthat

0.2.1

バックポート

1.2.1

基

4.1.1

base64enc

0.1-3

bit

4.0.4

ビット64

4.0.5

ブロッブ

1.2.2

ブート

1.3-28

醸成

1.0-6

ブリオ

1.1.2

箒

0.7.9

bslibの

0.3.0

カケム

1.0.6

コール

3.7.0

キャレット

6.0-88

セルレンジャー

1.1.0

クロン

2.3-56

クラス

7.3-19

CLI

3.0.1

clipr

0.7.1

クラスター

2.1.2

コードツール

0.2-18

カラースペース

2.0-2

コモンマーク

1.7

コンパイラ

4.1.1

コンフィグ

0.3.1

CPP11の

0.3.1

クレヨン

1.4.1

資格情報

1.3.1

Curl

4.3.2

データ.テーブル

1.14.0

データセット

4.1.1

DBI

1.1.1

dbplirの

2.1.1

DESC

1.3.0

開発ツール

2.4.2

ディフobj

0.3.4

ダイジェスト

0.6.27

dplyrの

1.0.7

DTPLyr

1.1.0

省略記号

0.3.2

評

0.14

ファンシ

0.5.0

ファーバー

2.1.0

ファストマップ

1.1.0

フォーキャッツ

0.5.1

For each

1.5.1

外国の

0.8-81

鍛える

0.2.0

FSの

1.5.0

未来

1.22.1

future.お申込み

1.8.1

嗽

1.2.0

ジェネリック

0.1.0

ゲルト

1.4.1

ggplot2の

3.3.5

gh

1.3.0

ギットレッズ

0.1.1

glmnet

4.1-2

グローバル

0.14.0

膠

1.4.2

グーグルドライブ

2.0.0

グーグルシート4

1.0.0

ガウアー

0.2.2

グラフィックス

4.1.1

grDevicesの

4.1.1

グリッド

4.1.1

グリッドエクストラ

2.3

gsubfnの

0.7

GTABLE(GTABLE)

0.3.0

避難所

2.4.3

高い

0.9

HMSの

1.1.0

htmlツール[htmltools]

0.5.2

htmlウィジェット

1.5.4

httpuv

1.6.3

httr

1.4.2

hwriter

1.3.2

hwriterPlusの

1.0-3

ids

1.0.1

イニ

0.3.1

イプレッド

0.9-12

アイソバンド

0.2.5

反復 子

1.0.13

jquerylib

0.1.4

jsonlite

1.7.2

カーンスムース

2.23-20

ニット

1.34

ラベリング

0.4.2

あとで

1.3.0

格子

0.20-44

溶岩

1.6.10

ライフサイクル

1.0.0

リッスン

0.8.0

ルブリデート

1.7.10

マグリット

2.0.1

Markdown

1.1

質量

7.3-54

マトリックス

1.3-4

メモ

2.0.0

メソッド

4.1.1

mgcv

1.8-37

マイム

0.11

モデルメトリクス

1.2.2.2

モデラー

0.1.8

マンセル

0.5.0

nlme

3.1-152

ネット

7.3-16

numDerivの

2016.8-1.1

オープンSSL

1.4.5

並列

4.1.1

並行して

1.28.1

柱

1.6.2

pkgbuild の

1.2.0

pkgconfig

2.0.3

pkgload(パッケージロード)

1.2.2

plogrの

0.2.0

プライル

1.8.6

褒める

1.0.0

プリティユニット

1.1.1

pROC

1.18.0

プロセスX

3.5.2

製品

2019.11.13

経過

1.2.2

プログレッサー

0.8.0

約束

1.2.0.1

プロト

1.0.0

PS

1.6.0

ゴロゴロ

0.3.4

R2D3の

0.2.5

R6の

2.5.1

ランダムフォレスト

4.6-14

ラプディレクトリ

0.3.3

rcmdcheckの

1.3.3

RColorブリューワー

1.1-2

Rcpp

1.0.7

読み取り

2.0.1

readxlの

1.3.1

レシピ

0.1.16

再戦

1.0.1

再戦2

2.1.2

リモコン

2.4.0

レプレックス

2.0.1

形状変更2

1.4.4

ラン

0.4.11

rmarkdown

2.11

RODBC

1.3-19

リオキシジェン2

7.1.2

rpart

4.1-15

rprojroot さん

2.0.2

サーブ

1.8-8

RSQLite (英語)

2.2.8

rstudioapi

0.13

rversions

2.1.1

アヴェスト

1.0.1

サス

0.4.0

秤

1.1.1

セレクタ

0.4-2

セッション情報

1.1.1

形

1.4.6

shiny

1.6.0

ソースツール

0.1.7

sparklyr

1.7.2

SparkR

3.2.0

空間的

7.3-11

スプライン

4.1.1

sqldf

0.4-11

スクエアム

2021.1

統計

4.1.1

統計4

4.1.1

ストリンギ

1.7.4

ストリンガー

1.4.0

生存

3.2-13

SYSの

3.4

tcltk

4.1.1

ティーチングデモ

2.10

テストを

3.0.4

ティブル

3.1.4

ティディル

1.1.3

ティディセレクト

1.1.1

ティディバース

1.3.1

日時

3043.102

タイニーテックス

0.33

ツール

4.1.1

tzdb

0.1.2

usethisさん

2.0.1

UTF8

1.2.2

ユーティリティ

4.1.1

UUIDの

0.1-4

vctrs

0.3.8

viridisライト

0.4.0

ブルーム

1.5.5

ワルド

0.3.1

ウイスカー

0.4

ウィザー

2.4.2

xfun

0.26

XML2の

1.3.2

xopen(オーペン)

1.0.0

エクステーブル

1.8-4

ヤムラ

2.2.1

郵便番号

2.2.0

インストール済み Java and Scala ライブラリ (Scala 2.12 クラスター版)​

グループID

アーティファクト ID

バージョン

アントル

アントル

2.7.7

com.amazonawsの

Amazon-kinesis-client

1.12.0

com.amazonawsの

aws-java-sdk-オートスケール

1.11.655

com.amazonawsの

aws-java-sdk-cloudformation

1.11.655

com.amazonawsの

aws-java-sdk-cloudfront

1.11.655

com.amazonawsの

aws-java-sdk-cloudhsm

1.11.655

com.amazonawsの

aws-java-sdk-cloudsearch(英語)

1.11.655

com.amazonawsの

aws-java-sdk-cloudtrail

1.11.655

com.amazonawsの

aws-java-sdk-cloudwatch

1.11.655

com.amazonawsの

aws-java-sdk-cloudwatchメトリクス

1.11.655

com.amazonawsの

aws-java-sdk-コードデプロイ

1.11.655

com.amazonawsの

aws-java-sdk-cognitoアイデンティティ

1.11.655

com.amazonawsの

aws-java-sdk-cognitosync

1.11.655

com.amazonawsの

aws-java-sdk-configの

1.11.655

com.amazonawsの

aws-java-sdk-コア

1.11.655

com.amazonawsの

aws-java-sdk-データパイプライン

1.11.655

com.amazonawsの

aws-java-sdk-directconnectの

1.11.655

com.amazonawsの

aws-java-sdkディレクトリ

1.11.655

com.amazonawsの

aws-java-sdk-ダイナモDB

1.11.655

com.amazonawsの

aws-java-sdk-ec2 の

1.11.655

com.amazonawsの

aws-java-sdk-ecsの

1.11.655

com.amazonawsの

aws-java-sdk-efs

1.11.655

com.amazonawsの

aws-java-sdk-elasticache

1.11.655

com.amazonawsの

aws-java-sdk-elasticbeanstalk

1.11.655

com.amazonawsの

aws-java-sdk-elasticloadbalancing

1.11.655

com.amazonawsの

aws-java-sdk-elasticトランスコーダー

1.11.655

com.amazonawsの

aws-java-sdk-emr

1.11.655

com.amazonawsの

aws-java-sdk-glacier

1.11.655

com.amazonawsの

aws-java-sdk-グルー

1.11.655

com.amazonawsの

aws-java-sdk-iam

1.11.655

com.amazonawsの

aws-java-sdk-importexport

1.11.655

com.amazonawsの

aws-java-sdk-キネシス

1.11.655

com.amazonawsの

aws-java-sdk-kmsの

1.11.655

com.amazonawsの

aws-java-sdk-ラムダ

1.11.655

com.amazonawsの

aws-java-sdk-logs

1.11.655

com.amazonawsの

aws-java-sdk-機械学習

1.11.655

com.amazonawsの

aws-java-sdk-opsworks

1.11.655

com.amazonawsの

aws-java-sdk-rds

1.11.655

com.amazonawsの

aws-java-sdk-レッドシフト

1.11.655

com.amazonawsの

aws-java-sdk-ルート53

1.11.655

com.amazonawsの

aws-java-sdk-s3 の

1.11.655

com.amazonawsの

aws-java-sdk-ses

1.11.655

com.amazonawsの

aws-java-sdk-simpledb

1.11.655

com.amazonawsの

aws-java-sdk-シンプルなワークフロー

1.11.655

com.amazonawsの

aws-java-sdk-snsの

1.11.655

com.amazonawsの

aws-java-sdk-sqs

1.11.655

com.amazonawsの

aws-java-sdk-ssm

1.11.655

com.amazonawsの

aws-java-sdk-storagegateway

1.11.655

com.amazonawsの

aws-java-sdk-sts

1.11.655

com.amazonawsの

aws-java-sdk-サポート

1.11.655

com.amazonawsの

aws-java-sdk-swf-ライブラリ

1.11.22

com.amazonawsの

aws-java-sdk-ワークスペース

1.11.655

com.amazonawsの

jmespath-java

1.11.655

com.chuusai(英語)

shapeless_2.12

2.3.3

com.clearspring.アナリティクス

stream

2.9.6

com.databricksの

サーブ

1.8-3

com.databricksの

ジェット3t

0.7.1-0

com.databricks.scalapb

compilerplugin_2.12

0.4.15-10

com.databricks.scalapb

scalapbのruntime_2.12

0.4.15-10

com.esotericソフトウェア

kryo-shaded(クリョシェード)

4.0.2

com.esotericソフトウェア

ミンログ

1.3.0

com.fasterxmlの

クラスメイト

1.3.4

com.fasterxml.jackson.core

ジャクソン-注釈

2.12.2

com.fasterxml.jackson.core

ジャクソンコア

2.12.2

com.fasterxml.jackson.core

ジャクソン-データバインド

2.12.2

com.fasterxml.jackson.dataformat

ジャクソン-データフォーマット-CBOR

2.12.2

com.fasterxml.jackson.datatype

ジャクソン-データ型-JODA

2.12.2

com.fasterxml.jackson.module

ジャクソン-モジュール-パラナマー

2.12.2

com.fasterxml.jackson.module

ジャクソンモジュール-Scala.12

2.12.2

com.github.ben-manes.caffeine

カフェイン

2.3.4

com.github.fommil (英語)

Jniloader

1.1

com.github.fommil.netlib (英語)

コア

1.1.2

com.github.fommil.netlib (英語)

native_ref-ジャワ

1.1

com.github.fommil.netlib (英語)

native_ref-java-natives

1.1

com.github.fommil.netlib (英語)

native_system-Javaの

1.1

com.github.fommil.netlib (英語)

native_system-java-natives

1.1

com.github.fommil.netlib (英語)

netlib-native_ref-linux-x86_64-natives

1.1

com.github.fommil.netlib (英語)

netlib-native_system-linux-x86_64-natives

1.1

com.github.luben

ZSTD-JNI

1.5.0-4

com.github.wendykierp (英語)

JTransformsの

3.1

com.google.code.findbugs

JSR305

3.0.0

com.google.code.gson(英語)

gson

2.8.6

com.google.crypto.tink

ティンク

1.6.0

com.google.flatbuffers

フラットバッファ-Java

1.9.0

com.google.guava

グアバ

15.0

com.google.protobuf

protobuf-java

2.6.1

com.h2データベース

H2

1.4.195

com.helger

プロファイラー

1.1.1

com.jcraftの

jsch

0.1.50

com.jolboxの

ボーンカップ

0.8.0.リリース

com.lihaoyi

sourcecode_2月12日

0.1.9

com.microsoft.sqlserver

mssqlの-JDBC

9.2.1.JRE8

com.microsoft.azure

azure-データレイク-store-sdk

2.3.9

com.ningの

圧縮-LZF

1.0.3

com.sun.istack

istack-commons-ランタイム

3.0.8

com.sun.mail

javax.mail

1.5.2

com.tdunning

JSON

1.8

com.thoughtworks.paranamer

パラナマー

2.8

com.trueaccord.lensesの

lenses_2.12

0.4.12

コム。囀る

チルジャワ

0.10.0

コム。囀る

chill_2.12

0.10.0

コム。囀る

util-app_2.12

7.1.0

コム。囀る

util-core_2.12

7.1.0

コム。囀る

util-function_2.12

7.1.0

コム。囀る

util-jvm_2.12

7.1.0

コム。囀る

util-lint_2.12

7.1.0

コム。囀る

util-registry_2.12

7.1.0

コム。囀る

util-stats_2.12

7.1.0

com.タイプセーフ

コンフィグ

1.2.1

Scala-logging

Scala-logging_2.12

3.7.2

com.univocityの

univocity-パーサー

2.9.1

com.zaxxerの

ひかりCP

3.1.0

コモンズCLI

コモンズCLI

1.2

コモンズコーデック

コモンズコーデック

1.15

コモンズコレクション

コモンズコレクション

3.2.2

コモンズ-DBCP

コモンズ-DBCP

1.4

コモンズファイルアップロード

コモンズファイルアップロード

1.3.3

commons-httpクライアント

commons-httpクライアント

3.1

コモンズ-IO

コモンズ-IO

2.8.0

コモンズ-ラング

コモンズ-ラング

2.6

コモンズロギング

コモンズロギング

1.1.3

コモンズネット

コモンズネット

3.1

コモンズプール

コモンズプール

1.5.4

dev.ludovic.netlib さん

アーパック

1.3.2

dev.ludovic.netlib さん

ブラス

1.3.2

dev.ludovic.netlib さん

ラパック

1.3.2

ハイブ-2.3__hadoop-3.2

ジェット3T-0.7

liball_deps_2.12

info.ganglia.gmetric4j

gmetric4jの

1.0.10

io.エアリフト

エアコンプレッサー

0.19

io.delta

デルタシェアリング-spark_2.12

0.1.0

io.dropwizard.メトリクス

メトリクスコア

4.1.1

io.dropwizard.メトリクス

メトリクス-グラファイト

4.1.1

io.dropwizard.メトリクス

メトリクス-healthchecks

4.1.1

io.dropwizard.メトリクス

メトリクス-jetty9

4.1.1

io.dropwizard.メトリクス

メトリクス-JMX

4.1.1

io.dropwizard.メトリクス

メトリクス-JSON

4.1.1

io.dropwizard.メトリクス

メトリクス-JVM

4.1.1

io.dropwizard.メトリクス

メトリクスサーブレット

4.1.1

io.nettyの

netty-すべて

4.1.63.最終版

io.プロメテウス

シンプルクライアント

0.7.0

io.プロメテウス

simpleclient_common

0.7.0

io.プロメテウス

simpleclient_dropwizard

0.7.0

io.プロメテウス

simpleclient_pushgateway

0.7.0

io.プロメテウス

simpleclient_servlet

0.7.0

io.prometheus.jmx

収集家

0.12.0

jakarta.annotation

jakarta.annotation-api

1.3.5

jakarta.servlet (英語)

jakarta.servlet-api

4.0.3

jakarta.validation(ジャカルタ検証)

jakarta.validation-api

2.0.2

jakarta.ws.rs

jakarta.ws.rs-api

2.1.6

javax.activationの

アクティベーション

1.1.1

javax.annotation

javax.annotation-api

1.3.2

javax.el

javax.el-api

2.2.4

javax.jdo

jdo-api

3.0.1

javax.transaction

jta

1.1

javax.transaction

トランザクションAPI

1.1

javax.xml.バインド

ヤックスビーAPI

2.2.2

javax.xml.ストリーム

スタックス-API

1.0-2

ジャボリューション

ジャボリューション

5.5.1

ジェイライン

ジェイライン

2.14.6

ジョダタイム

ジョダタイム

2.10.5

log4j(ログ4J)

apache-log4j-extras

1.2.17

log4j(ログ4J)

log4j(ログ4J)

1.2.17

Maven-ツリー

ハイブ-2.3__hadoop-3.2

liball_deps_2.12

net.java.dev.jna

jna

5.8.0

net.razorvine

パイロライト

4.30

net.sf.jpam (英語)

JPAMの

1.1

net.sf.opencsv

opencsvの

2.3

net.sf.supercsv (英語)

スーパーCSV

2.2.0

ネット.スノーフレーク

snowflake-ingest-sdk

0.9.6

ネット.スノーフレーク

スノーフレーク-JDBC

3.13.3

ネット.スノーフレーク

スパーク-snowflake_2.12

2.9.0-spark_3.1

net.sourceforge.f2j (英語)

arpack_combined_all

0.1

org.acplt.remoteteaの

リモートTEA-ONCRPC

1.1.2

org.antlr

ST4の

4.0.4

org.antlr

antlrランタイム

3.5.2

org.antlr

antlr4ランタイム

4.8

org.antlr

文字列テンプレート

3.2.1

org.apache.ant

蟻

1.9.2

org.apache.ant

アントJSCH

1.9.2

org.apache.ant

アントランチャー

1.9.2

org.apache.arrow(アパッチ・アロー)

arrow-format

2.0.0

org.apache.arrow(アパッチ・アロー)

arrow-memory-core

2.0.0

org.apache.arrow(アパッチ・アロー)

arrow-memory-netty

2.0.0

org.apache.arrow(アパッチ・アロー)

arrow-vector

2.0.0

org.apache.avro

AVRO

1.10.2

org.apache.avro

アブロIPC

1.10.2

org.apache.avro

アブロマップド

1.10.2

org.apache.commonsの

コモンズ圧縮

1.20

org.apache.commonsの

コモンズ-クリプト

1.1.0

org.apache.commonsの

コモンズ-LANG3

3.12.0

org.apache.commonsの

コモンズ-数学3

3.4.1

org.apache.commonsの

コモンズテキスト

1.6

org.apache.curator (英語)

キュレーター・クライアント

2.13.0

org.apache.curator (英語)

キュレーターフレームワーク

2.13.0

org.apache.curator (英語)

キュレーターレシピ

2.13.0

org.apache.derbyの

ダービー

10.14.2.0

org.apache.hadoop です。

hadoop クライアント ランタイム

3.3.1

org.apache.hive です。

ハイブビーライン

2.3.9

org.apache.hive です。

ハイブ CLI

2.3.9

org.apache.hive です。

ハイブ-JDBC

2.3.9

org.apache.hive です。

ハイブ - llap クライアント

2.3.9

org.apache.hive です。

ハイブ - llap - 共通

2.3.9

org.apache.hive です。

ハイブセルデ

2.3.9

org.apache.hive です。

ハイブシム

2.3.9

org.apache.hive です。

ハイブストレージAPI

2.7.2

org.apache.hive.shims

ハイブシム-0.23

2.3.9

org.apache.hive.shims

ハイブシム-共通

2.3.9

org.apache.hive.shims

ハイブシムススケジューラ

2.3.9

org.apache.htrace

htrace-core4

4.1.0-インキュベーション

org.apache.httpコンポーネント

httpクライアント

4.5.13

org.apache.httpコンポーネント

httpコア

4.4.12

org.apache.ivy

蔦

2.5.0

org.apache.mesos

メソスシェードプロトブ

1.4.0

org.apache.orc

オークコア

1.6.10

org.apache.orc

orc-mapreduce

1.6.10

org.apache.orc

オークシム

1.6.10

org.apache.parquet

parquet-column

1.12.0-データブリックス-0003

org.apache.parquet

parquet-common

1.12.0-データブリックス-0003

org.apache.parquet

parquet-encoding

1.12.0-データブリックス-0003

org.apache.parquet

parquet-format-structures

1.12.0-データブリックス-0003

org.apache.parquet

parquet-hadoop

1.12.0-データブリックス-0003

org.apache.parquet

parquet-jackson

1.12.0-データブリックス-0003

org.apache.thrift

libfb303の

0.9.3

org.apache.thrift

リブスリフト

0.12.0

org.apache.xbean

xbean-asm9-shaded (英語)

4.20

org.apache.yetus (英語)

オーディエンスアノテーション

0.5.0

org.apache.zookeeper

動物園の飼育係

3.6.2

org.apache.zookeeper

動物園の飼育係ジュート

3.6.2

org.checkerフレームワーク

チェッカークォール

3.5.0

org.codehaus.jackson

ジャクソン-コア-ASL

1.9.13

org.codehaus.jackson

ジャクソン-マッパー-ASL

1.9.13

org.codehaus.janino

commons-コンパイラ

3.0.16

org.codehaus.janino

ジャニーノ

3.0.16

org.datanucleus (英語)

データ核-API-JDO

4.2.4

org.datanucleus (英語)

データ核コア

4.1.17

org.datanucleus (英語)

データ核-RDBMS

4.1.19

org.datanucleus (英語)

javax.jdo

3.2.0-m3

組織Eclipse.jetty

桟橋クライアント

9.4.40.v20210413

組織Eclipse.jetty

桟橋の続き

9.4.40.v20210413

組織Eclipse.jetty

桟橋-HTTP

9.4.40.v20210413

組織Eclipse.jetty

桟橋-IO

9.4.40.v20210413

組織Eclipse.jetty

桟橋-JNDI

9.4.40.v20210413

組織Eclipse.jetty

桟橋プラス

9.4.40.v20210413

組織Eclipse.jetty

桟橋プロキシ

9.4.40.v20210413

組織Eclipse.jetty

桟橋警備

9.4.40.v20210413

組織Eclipse.jetty

桟橋サーバー

9.4.40.v20210413

組織Eclipse.jetty

桟橋サーブレット

9.4.40.v20210413

組織Eclipse.jetty

桟橋サーブレット

9.4.40.v20210413

組織Eclipse.jetty

桟橋-util

9.4.40.v20210413

組織Eclipse.jetty

桟橋-util-ajax

9.4.40.v20210413

組織Eclipse.jetty

桟橋-webapp

9.4.40.v20210413

組織Eclipse.jetty

桟橋XML

9.4.40.v20210413

組織Eclipse.jetty.websocket

websocket-api

9.4.40.v20210413

組織Eclipse.jetty.websocket

websocket-クライアント

9.4.40.v20210413

組織Eclipse.jetty.websocket

websocket-共通

9.4.40.v20210413

組織Eclipse.jetty.websocket

websocket-サーバー

9.4.40.v20210413

組織Eclipse.jetty.websocket

websocket-サーブレット

9.4.40.v20210413

org.fusesource.leveldbjni

レベルdbjni-すべて

1.8

org.glassfish.hk2

HK2-API

2.6.1

org.glassfish.hk2

HK2ロケーター

2.6.1

org.glassfish.hk2

hk2-utilsの

2.6.1

org.glassfish.hk2

osgi-リソースロケーター

1.0.3

org.glassfish.hk2.external (英語)

AOPALLIANCE-再パッケージ化

2.6.1

org.glassfish.hk2.external (英語)

jakarta.inject です。

2.6.1

org.glassfish.jaxbの

jaxbランタイム

2.3.2

org.glassfish.jersey.containers

ジャージーコンテナサーブレット

2.34

org.glassfish.jersey.containers

ジャージーコンテナサーブレットコア

2.34

org.glassfish.jersey.coreの

ジャージークライアント

2.34

org.glassfish.jersey.coreの

ジャージー共通

2.34

org.glassfish.jersey.coreの

ジャージーサーバー

2.34

org.glassfish.jersey.inject

ジャージ-HK2

2.34

org.hibernate.validator

hibernate-validator

6.1.0.ファイナル

org.javassist

ジャバス奏者

3.25.0-GAの

org.jboss.logging

jboss-ロギング

3.3.2.ファイナル

org.jdbi

DBI

2.63.1

org.jetbrainsの

注釈

17.0.0

org.joda

ジョダ変換

1.7

org.jodd さん

ジョッドコア

3.5.2

org.json4sの

json4s-ast_2.12

3.7.0-M11

org.json4sの

json4s-core_2.12

3.7.0-M11

org.json4sの

json4s-jackson_2.12

3.7.0-M11

org.json4sの

json4s-scalap_2.12

3.7.0-M11

org.lz4

LZ4-Javaの

1.7.1

org.mariadb.JDBC

mariadb-java-クライアント

2.2.5

org.objenesis

オブジェネシス

2.5.1

org.postgresql

PostgreSQL

42.2.19

org.roaringbitmap

ロアリングビットマップ

0.9.14

org.roaringbitmap

シム

0.9.14

org.rocksdbの

ロックスDBJNI

6.20.3

org.rosuda.REngine

レンジン

2.1.0

組織Scala-lang

Scala-compiler_2.12

2.12.14

組織Scala-lang

Scala-Library.12

2.12.14

組織Scala-lang

Scala-reflect_2.12

2.12.14

組織Scala-lang.modules

Scalaコレクションcompat_2.12

2.4.3

組織Scala-lang.modules

Scala-parser-combinators_2.12

1.1.2

組織Scala-lang.modules

Scala-xml_2.12

1.2.0

組織Scala-sbt

テストインターフェース

1.0

org.scalacheck

scalacheck_2.12

1.14.2

org.scalactic

scalactic_2.12

3.0.8

org.scalanlp

そよ風-macros_2.12

1.0

org.scalanlp

breeze_2.12

1.0

org.scalatestの

scalatest_2.12

3.0.8

org.slf4j

jcl-over-slf4j

1.7.30

org.slf4j

7月-slf4j

1.7.30

org.slf4j

SLF4J-APIの

1.7.30

org.slf4j

SLF4J-ログ4J12

1.7.30

org.spark-project.spark です。

未使用

1.0.0

org.springframeworkの

スプリングコア

4.1.4.リリース

org.springframeworkの

スプリングテスト

4.1.4.リリース

org.threetenさん

スリーテンエクストラ

1.5.0

org.tukaani

xz

1.8

org.typelevel

algebra_2.12

2.0.0-M2

org.typelevel

cats-kernel_2.12

2.0.0-M4

org.typelevel

machinist_2.12

0.6.8

org.typelevel

マクロ-compat_2.12

1.1.1

org.typelevel

スパイア-macros_2.12

0.17.0-M1

org.typelevel

スパイア-platform_2.12

0.17.0-M1

org.typelevel

スパイア-util_2.12

0.17.0-M1

org.typelevel

spire_2.12

0.17.0-M1

org.wildfly.openssl

ワイルドフライ-openssl

1.0.7.ファイナル

org.xerial

sqlite-JDBC の

3.8.11.2

org.xerial.snappy(英語)

スナッピージャワ

1.1.8.4

org.yaml の

スネークヤム

1.24

オロ

オロ

2.0.8

pl.edu.icm

JLarge配列

1.5

ソフトウェア.Amazon.ion

イオンジャワ

1.0.2

スタックス

スタックス-API

1.0.1

に最終更新