Databricks Runtime 13.2 (EoS)
この Databricks Runtime バージョンのサポートは終了しました。 サポート終了日については、「 サポート終了の履歴」を参照してください。 サポートされているすべての Databricks Runtime バージョンについては、「 Databricks Runtime リリースノートのバージョンと互換性」を参照してください。
次のリリースノートは、Databricks Runtime Apache Spark3.4.0 を搭載した 13.2 に関する情報を提供します。
Databricks は 2023 年 7 月にこのバージョンをリリースしました。
これらのリリースノートには、このリリースの時点で Google Cloud で利用できない機能への参照が含まれている場合があります。
新機能と改善点
- RocksDB 状態ストアの変更ログのチェックポイント設定
- vacuum年にシャロークローンを使用したUnity Catalog の信頼性が向上しました。
- Delta Lake UniForm for Iceberg がパブリック プレビュー開始
- Delta Lake リキッドクラスタリングはパブリック プレビュー段階です
- IDENTIFIER 句のサポート
- Unity Catalog での Python と Pandas のユーザー定義関数 (UDF) のサポート
- Delta Sharing を使用したスキーマの共有
- バグの修正
RocksDB 状態ストアの変更ログのチェックポイント設定
変更ログのチェックポイント設定を有効にすると、ステートフルな構造化ストリーミングワークロードのチェックポイントの期間とエンドツーエンドのレイテンシを短縮できます。 Databricks では、すべての構造化ストリーミング ステートフル クエリに対して changelog のチェックポイント設定を有効にすることをお勧めします。 「変更ログのチェックポイント設定を有効にする」を参照してください。
vacuum年にシャロークローンを使用したUnity Catalog の信頼性が向上しました。
シャロークローン操作のソースとターゲットに Unity Catalog マネージドテーブルを使用すると、 Unity Catalog が基になるデータファイルを管理して、クローン操作のソースとターゲットの信頼性を向上させます。 シャロークローンのソースで VACUUM を実行しても、クローンされたテーブルは壊れません。 浅いクローンのvacuumとUnity Catalogを参照してください。
Delta Lake UniForm for Iceberg がパブリック プレビュー開始
Delta Lake Universal Format (UniForm) を使用すると、Iceberg クライアントで Delta テーブルを読み取ることができます。 Deltaクライアントを使用したテーブルの読み取りIcebergを参照してください。
Delta Lake リキッドクラスタリングがパブリック プレビュー段階に
Delta Lake リキッドクラスタリングは、テーブルのパーティション分割とZORDERを置き換えて、データレイアウトの決定を簡素化し、クエリのパフォーマンスを最適化します。 「Deltaテーブルにリキッドクラスタリングを使用する」を参照してください。
IDENTIFIER 句のサポート
IDENTIFIER(:mytable) を使用して、多くの SQL ステートメントでテーブル、カラム、関数、およびスキーマの名前を安全にパラメータ化します。
Unity Catalog での Python と Pandas のユーザー定義関数 (UDF) のサポート
Databricks Runtime 13.2 以降では、Unity Catalog 対応ワークスペースで標準アクセス モード (以前の共有アクセス モード) を使用するクラスターで、Python で記述されたユーザー定義関数 (UDF) がサポートされています。これには、Python と Pandas UDF が含まれます。 Python UDFs の詳細については、「 ユーザー定義のスカラー関数 - Python」をご参照ください。
Delta Sharing を使用したスキーマの共有
Databricks Runtime 13.2 では、 ALTER SHARE <share-name> ADD SCHEMA <schema-name> を使用して Delta Sharing を使用してスキーマ全体を共有する機能が追加され、受信者は、スキーマを共有する時点でスキーマ内のすべてのテーブルとビュー、および将来スキーマに追加されるテーブルとビューにアクセスできるようになります。 共有へのスキーマの追加およびALTER SHAREを参照してください。
バグの修正
- JSON リーダーのバグを修正し、
failOnUnknownFieldsmodeが有効になっている場合にレコードがPERMISSIVEモードで解析されました。レコードはDROPMALFORMEDparserモードでドロップされるか、これらのオプションのいずれかが設定されている場合はbadRecordsPathに書き出されます。FAILFAST列の型が一致しない場合、エラーがスローされます。
ライブラリのアップグレード
-
アップグレードされた Python ライブラリ:
- nodeenv を 1.7.0 から 1.8.0 へ
-
アップグレードされた R ライブラリ:
-
アップグレードされた Java ライブラリ:
- io.delta.delta-sharing-spark_2.12 を 0.6.7 から 0.7.0 に変更
Apache Spark
Databricks Runtime 13.2 には Apache Spark 3.4.0 が含まれています。 このリリースには、Spark のすべての修正と改善が含まれています Databricks Runtime 13.1 (EoS) に含まれており、Spark に対して行われた次の追加のバグ修正と機能強化も含まれています。
- [SPARK-42750] [SC-133452][dbrrm-273] 名前による挿入ステートメントのサポート
- [SPARK-43133] [SC-133728] ScalaクライアントDataStreamWriter Foreachのサポート
- [SPARK-43663] [SC-134135][接続][PS] 有効にする
SeriesParityTests.test_compare - [SPARK-43684] [SC-134162][spark-43685][SPARK-43686][spark-43691][CONNECT][ps] Spark Connectの
(NullOps|NumOps).(eq|ne)を修正。 - [SPARK-44021] [SC-134109][sql] spark.sql.files.maxPartitionNumを追加
- [SPARK-43910] [SC-132936][sql] エラーでIDから
__auto_generated_subquery_nameを削除 - [SPARK-43976] [SC-133375][core] イベントログにmodifiedConfigsが存在しない場合を処理
- [SPARK-32559] [SC-133992][sql] トリムロジックがASCII制御文字を正しく処理していなかった問題を修正
- [SPARK-43421] [SC-132930][ss] RocksDB 状態ストア プロバイダーの変更ログベースのチェックポイントを実装
- [SPARK-43594] [SC-133851][sql] anyToMicrosにLocalDateTimeを追加
- [SPARK-43884] [SC-133867] DDLのパラメータマーカー
- [SPARK-43398] [SC-133894][core] エグゼキューターのタイムアウトを最大にすべきで、アイドルシャッフルとrddのタイムアウトにすべきです
- [SPARK-43610] [SC-133892][接続][PS] Spark Connectで
InternalFrame.attach_distributed_columnを有効にします。 - [SPARK-43971] [SC-133826][接続][Python] PythonのcreateDataFrameをストリーミング方式でサポート
- [SPARK-44006] [SC-133652][接続][Python] Support cache アーティファクト
- [SPARK-43790] [SC-133468] [Python][CONNECT][ml]
copyFromLocalToFsAPIを追加 - [SPARK-43921] [SC-133461][protobuf] ビルド時にProtobuf記述子ファイルを生成する
- [SPARK-43906] [SC-133638][sc-133404][Python][connect] SparkSession.addArtifactsのファイルサポートを実装
- [SPARK-44010] [SC-133744][Python][SS][マイナー] Python StreamingQueryProgress rowsPerSecond タイプの修正
- [SPARK-43768] [SC-132398][][CONNECT]Python PythonPythonSparkConnectでの依存関係管理サポート
- [SPARK-43979] [13.X] 「[SC-133456][sql] CollectedMetricsは自己結合で同じものとして扱うべき」を元に戻す
- [SPARK-42290] [SC-133696][sql] AQEがオンのときにOOMエラーが報告されない問題を修正
- [SPARK-43943] [SC-133648][sql][][connect]Python SQLScalaと に 数学関数を追加Python
- [SPARK-43747] [SC-132047]Python][CONNECT] .addArtifacts SparkSessionpyfileサポートを実装
- [SPARK-43700] [SC-133726][spark-43701][CONNECT][ps] Spark Connectで
TimedeltaOps.(sub|rsub)を有効にする - [SPARK-43712] [SC-133641] [spark-43713] [CONNECT] [ps] パリティ テストを有効にします:
test_line_plot、test_pie_plot. - [SPARK-43867] [SC-132895][sql] 未解決の属性の候補を改善
- [SPARK-43901] [SC-133454][sql] Avro が Long に支えられたカスタム 10 進型をサポート
- [SPARK-43267] [SC-133024][JDBC] postgresの不明なユーザー定義列を配列の文字列として処理する
- [SPARK-43935] [SC-133637][sql][Python][connect] ScalaとPythonにxpath_*関数を追加
- [SPARK-43916] [SC-133647][sql][Python][connect] ScalaとPython APIにパーセンタイルを追加
- [SPARK-43717] [SC-133455][connect] クライアントの削減アグリゲート Scala 、 Scala プリミティブ入力のnullパーティションを処理できない
- [SPARK-43984] [SC-133469][sql][PROTOBUF]
map結果が生成されない場合にforeachを使用するように変更 - [SPARK-43612] [SC-132011][接続][Python] SparkSession.addArtifactをクライアントに実装Python
- [SPARK-44002] [SC-133606][connect] アーティファクトステータスハンドラを修正
- [SPARK-43933] [SC-133470][sql][Python][connect] ScalaおよびPythonに線形回帰集計関数を追加
- [SPARK-43920] [SC-133614][sql][CONNECT] sql/api モジュールを作成
- [SPARK-43979] [SC-133456][sql] CollectedMetricsは自己結合と同じものとして扱うべき
- [SPARK-43977] [SC-133373][connect] の予期しないチェック結果を修正
dev/connect-jvm-client-mima-check - [SPARK-43985] [SC-133412][protobuf] Spark protobuf:列挙型をintsとして修正
- [SPARK-43930] [SC-133406][sql][Python][connect] ScalaおよびPythonにunix_*関数を追加
- [SPARK-43807] [SC-132545][sql] _LEGACY_ERROR_TEMP_1269 PARTITION_SCHEMA_IS_EMPTYへの移行
- [SPARK-43956] [SC-133123][sql] パーセンタイルの列のSQLが表示されないバグを修正[続き|ディスク]
- [SPARK-42626] [SC-133248][接続] SparkResultの破壊的反復子を追加
- [SPARK-43333] [SC-132898][sql] Avroがunionタイプをフィールド名stableのSQLに変換できるように
- [SPARK-43953] [SC-133134][接続] 削除
pass - [SPARK-43970] [SC-133403][Python][CONNECT] サポートされていないデータフレームメソッドをオートコンプリートから非表示に
- [SPARK-43973] [SC-133272][ss][UI] 構造化ストリーミングUIで失敗したクエリを正しく表示するようにしました
- [SPARK-42577] [SC-125445][core] ステージの最大試行回数制限を追加して、無限の再試行の可能性を回避
- [SPARK-43841] [SC-132699][sql] プレフィックスのない候補属性を処理
StringUtils#orderSuggestedIdentifiersBySimilarity - [SPARK-41497] [SC-124795][コア][フォローアップ]設定
spark.rdd.cache.visibilityTracking.enabledサポートバージョンを3.5.0に変更 - [SPARK-37942] [SC-130983][core][SQL] エラークラスを移行します
- [SPARK-43898] [SC-132926][core] Scala 2.13 の
KryoSerializerに自動登録するimmutable.ArraySeq$ofRef - [SPARK-43775] [SC-132891] [sql] データソースV2:更新を削除および挿入として表すことを許可する
- [SPARK-43817 ] [SC-132662][SPARK-43702][Python] pandas DataFrame からの createDataFrameおよびtoPandasにおけるユーザー定義タイプをサポート
- [SPARK-43418] [SC-132753][sc-130685][CONNECT] SparkSession.Builder.getOrCreateを追加
- [SPARK-43549] [SC-132383][sql] _LEGACY_ERROR_TEMP_0036をINVALID_SQL_SYNTAXに変換します。ANALYZE_TABLE_UNEXPECTED_NOSCAN
- [SPARK-41497] [SC-124644][core] rddキャッシュを使用した再試行タスクの場合のアキュムレータの過小カウントを修正
- [SPARK-43892] [SC-133006][Python]
df[|]のオートコンプリートサポートを追加pyspark.sql.dataframe.DataFrame - [SPARK-43881] [SC-133140][sql][Python][connect] Catalog.listDatabasesのオプションパターンを追加
- [SPARK-43205] [SC-132623] IDENTIFIER句
- [SPARK-43545] [SC-132378][sql][Python] ネストされたタイムスタンプタイプをサポート
- [SPARK-43949] [SC-133048] [Python] cloudpickle を 2.2.1 にアップグレード
- [SPARK-43760] [SC-132809][sql] スカラーサブクエリ結果のnull可能性
- [SPARK-43696] [SC-132737][spark-43697][SPARK-43698][spark-43699][PS] Spark Connectの
TimedeltaOpsを修正 - [SPARK-43895] [SC-132897][接続][GO] goパッケージパスを準備します
- [SPARK-43894] [SC-132892][Python] df.cache()のバグを修正
- [SPARK-43509] [SC-131625][connect] 複数のSpark Connectセッションの作成をサポート
- [SPARK-43882] [SC-132888][sql] _LEGACY_ERROR_TEMP_2122に名前を割り当てる
- [SPARK-43687] [SC-132747] [spark-43688] [SPARK-43689] [spark-43690] [PS] Spark Connectの
NumOpsを修正 - [SPARK-43604] [SC-132165][sql] ソースコードにエラーのテキストを埋め込まないように
INVALID_SQL_SYNTAXをリファクタリング - [SPARK-43859] [SC-132883][sql] LateralColumnAliasReferenceのtoStringを上書き
- [SPARK-43792] [SC-132939][sql][Python][connect] Catalog.listCatalogs のオプションパターンを追加
- [SPARK-43353] 「[SC-132734][Python] 残りのセッションエラーをエラークラスに移行」を元に戻す
- [SPARK-43375] [SC-130309][connect] INVALID_CONNECT_URLのエラーメッセージを改善
- [SPARK-43863] [SC-132721][接続] Scala 2.13の
SparkConnectPlannerから冗長なtoSeqを削除 - [SPARK-43676] [SC-132708][spark-43677][SPARK-43678][spark-43679][PS] Spark Connectの
DatetimeOpsを修正 - [SPARK-43666] [SC-132689][spark-43667][SPARK-43668][spark-43669][PS] Spark Connectの
BinaryOpsを修正 - [SPARK-43680] [SC-132709][spark-43681] [SPARK-43682][spark-43683] [PS] Spark Connectの
NullOpsを修正 - [SPARK-43782] [SC-132885][core] 静的Spark confによるログレベル設定をサポート
- [SPARK-43132] [SC-131623] [SS] [CONNECT] Python クライアント DataStreamWriter foreach() API
- [SPARK-43290] [SC-131961][sql] ExpressionImplUtilsにAES IVおよびAADのサポートを追加
- [SPARK-43795] [SC-132532][connect] SparkConnectPlannerに使用されていないパラメーターを削除
- [SPARK-42317] [SC-129194][sql] _LEGACY_ERROR_TEMP_2247: CANNOT_MERGE_SCHEMAS に名前を割り当てる
- [SPARK-43597] [SC-131960][sql] エラークラス_LEGACY_ERROR_TEMP_0017に名前を割り当てる
- [SPARK-43834] [SC-132679][sql] のコンパイルエラーでエラークラスを使用
ResolveDefaultColumns - [SPARK-43749] [SC-132423][spark-43750][SQL] エラークラス_LEGACY_ERROR_TEMP_240[4-5]に名前を割り当てる
- [SPARK-43576] [SC-132533][core] コアモジュールから未使用の宣言を削除
- [SPARK-43314] [SC-129970][接続][Python] Connect クライアントのエラーをエラークラスに移行Spark
- [SPARK-43799] [SC-132715][Python] PySpark Protobuf APIに記述子バイナリオプションを追加
- [SPARK-43837] [SC-132678][sql] エラークラス_LEGACY_ERROR_TEMP_103[1-2]に名前を割り当てます
- [SPARK-43862] [SC-132750][sql] エラークラス LEGACY_ERROR_TEMP (1254 & 1315)に名前を割り当てる
- [SPARK-43886] [ SC-132808] [Python] ジェネリックタプルをPandas UDFの入力ヒントとして受け入れる
- [SPARK-43530] [SC-132653][protobuf] 記述子ファイルを一度だけ読み取る
- [SPARK-43820] [SC-132676][spark-43822][SPARK-43823][spark-43826][SPARK-43827] エラークラス_LEGACY_ERROR_TEMP_241[1-7]に名前を割り当てる
- [SPARK-43671] [SC-132519] [spark-43672] [SPARK-43673] [spark-43674] [PS] Spark Connectの
CategoricalOpsを修正 - [SPARK-39979 ] [SC-132685] [SQL] Arrow UDF操作に大きな可変幅ベクトルを使用するオプションを追加
- [SPARK-43692] [SC-132660][spark-43693][SPARK-43694][spark-43695][PS] Spark Connectの
StringOpsを修正 - [SPARK-43353] [SC-132734][Python] 残りのセッションエラーをエラークラスに移行
- [SPARK-43815] [SC-132781][sql]
to_varcharエイリアスを追加to_char - [SPARK-43543] [13.x][sc-131839][Python] Pandas UDF のネストされた MapType の動作を修正
- [SPARK-43361] [SC-131789][protobuf] 列挙型シリアル化に関連するエラーのドキュメントを更新する
- [SPARK-43740] [SC-132035][Python][CONNECT] サポートされていない
sessionメソッドをオートコンプリートから非表示に - [SPARK-43022] [SC-131681][connect] Scalaクライアントのprotobuf関数をサポート
- [SPARK-43304] [13.x][sc-129969][接続][Python]
NotImplementedErrorの移行先PySparkNotImplementedError - [SPARK-43860] [SC-132713][sql] 可能な限り末尾再帰を有効にします
- [SPARK-42421] [SC-132695][core] utilsを使用して、ローカルチェックポイントで使用される動的割り当てのスイッチを取得
- [SPARK-43590] [SC-132012][接続]
protobufモジュールでmimaチェックをサポートするようにconnect-jvm-client-mima-checkを作成 - [SPARK-43315] [13.x][接続][Python][ss] 残りのエラーを DataFrame から移行します (Reader|Writer) をエラークラスに
- [SPARK-43361] [SC-130980][protobuf] spark-protobuf: 列挙型を ints として serde を許可
- [SPARK-43789] [SC-132397][r] R createDataFrame で 'spark.sql.execution.arrow.maxRecordsPerBatch' をデフォルトで矢印とともに使用する
- [SPARK-43596] [SC-126994][sql] rewriteDomainJoinsでIsNull述語を処理する
- [SPARK-42249] [SC-122565][sql] エラーメッセージのドキュメンテーションのhtmlリンクを絞り込んでいます。
- [SPARK-43128] [SC-131628][接続][SS]
recentProgressとlastProgressリターンStreamingQueryProgressをネイティブのScala APIと一貫性を持たせる - [SPARK-43387] [SC-130448][sql] _LEGACY_ERROR_TEMP_1168の人間が判読できるエラーコードを提供します。
- [SPARK-43334] [SC-132358] [UI] ExecutorPeakMetricsDistributions を API レスポンスにシリアル化する際のエラーを修正
- [SPARK-42958] [SC-131475][connect] avro モジュールで mima チェックをサポートするように
connect-jvm-client-mima-checkをリファクタリング - [SPARK-43591] [SC-131977][sql] エラークラスに名前を割り当てる _LEGACY_ERROR_TEMP_0013
- [SPARK-38464] [SC-132211][core] org.apache.spark.io でエラークラスを使用
- [SPARK-43759] [SC-132189][sql][Python] PySpark.sql.typesでTimestampNTZTypeを公開
- [SPARK-43649] [SC-132036][spark-43650][SPARK-43651][sql] エラークラス_LEGACY_ERROR_TEMP_240[1-3]に名前を割り当てる
- [SPARK-43719] [SC-132016][webui] ハンドル
missing row.excludedInStagesフィールド - [SPARK-42956] [SC-127257][connect] Scalaクライアントのavro関数をサポート
- [SPARK-43487] [SC-131975][sql] ネストされたCTEエラーメッセージを修正
- [SPARK-43265] [SC-129653] エラーフレームワークを共通のutilsモジュールに移動
- [SPARK-40912] [SC-131547][core]KryoDeserializationStreamの例外のオーバーヘッド
- [SPARK-43583] [SC-131976][core] SaslRpcHandlerインスタンスの代わりにデリゲートからMergedBlockedMetaReqHandlerを取得する
- [SPARK-42996] [SC-131997][connect][PS][ml] 失敗したすべてのテストに対して適切なJIRAチケットを作成し、割り当てます。
- [SPARK-38469] [SC-131425][core] org.apache.spark.networkでエラークラスを使用
- [SPARK-43718] [SC-132014][sql] USING結合のキーに対してnullableを正しく設定
- [SPARK-43502] [SC-131419] [Python][CONNECT] 空の列を受け入れる
DataFrame.drop - [SPARK-43743] [SC-132038][sql] ポート HIVE-12188(Kerberos で保護されていない HS2 で DoAs が正しく機能しない)
- [SPARK-43598] [SC-131929][sql] エラークラス_LEGACY_ERROR_TEMP_2400に名前を割り当てる
- [SPARK-43138] [SC-131031][core] 移行中のClassNotFoundExceptionを修正
- [SPARK-43360] [SC-131526][ss][CONNECT] ScalaクライアントStreamingQueryManager
- [SPARK-38467] [SC-131025][core] org.apache.spark.memoryのエラークラスを使用
- [SPARK-43345] [SC-131790][spark-43346][SQL] エラークラスの名前を変更 LEGACY_ERROR_TEMP [0041|1206]
- [SPARK-42815] [SC-126450][sql] サブエクスプレッションの削除がショートカットエクスプレッションをサポート
- [SPARK-38462] [SC-130449][core] エラークラスを追加 INTERNAL_ERROR_EXECUTOR
- [SPARK-43589] [SC-131798][sql] 使用
cannotBroadcastTableOverMaxTableBytesErrorを修正bytesToString - [SPARK-43539] [SC-131830][sql] エラークラスに名前を割り当てる _LEGACY_ERROR_TEMP_0003
- [SPARK-43157] [SC-131688][sql] クローンされたプランが同じオブジェクトを参照しないように、InMemoryRelationキャッシュプランをクローン化
- [SPARK-43309] [SC-129746][spark-38461][CORE] INTERNAL_ERRORをカテゴリで拡張し、エラークラスを追加INTERNAL_ERROR_BROADCAST
- [SPARK-43281] [SC-131370][sql] 並列ライターがファイルメトリクスを更新しない問題を修正
- [SPARK-43383] [SC-130660][sql] LocalRelationに
rowCount統計を追加 - [SPARK-43574 ] [SC-131739] [PYTHON][SQL] ランタイム中にワーカーのUDFおよびpandas function APIs のPython実行可能ファイルを設定するためのサポート
- [SPARK-43569] [SC-131694][sql] HADOOP-14067の回避策を削除
- [SPARK-43183] [SC-128938][ss][13.x] StreamingQueryListener に新しいコールバック "onQueryIdle" を導入
- [SPARK-43528 ] [SC-131531][SQL][Python] pandas DataFrameを使用した作成データフレームでの重複したフィールド名のサポート
- [SPARK-43548] [SC-131686][ss] HADOOP-16255の回避策を削除
- [SPARK-43494] [SC-131272][core] リフレクションの代わりに
HdfsDataOutputStreamBuilderのreplicate()を直接呼び出すSparkHadoopUtil#createFile - [SPARK-43471] [SC-131063][core] 欠落しているhadoopPropertiesおよびmetricsPropertiesの処理
- [SPARK-42899] [SC-126456][sql] DataFrame.to(スキーマ)を修正 null 許容フィールドに null 非許容の入れ子フィールドがある場合を処理するため
- [SPARK-43302] [SC-129747][sql] Python UDAFをAggregateFunctionにする
- [SPARK-43223] [SC-131270][connect] タイプアグリゲーション、リデュース関数、RelationalGroupedDataset#as
- [SPARK-43482] [SC-131375][ss] QueryTerminatedEventを拡張して、エラークラスが例外に存在する場合にそれを含めるようにしました
- [SPARK-43359] [SC-131463][sql] Hiveテーブルから削除すると「UNSUPPORTED_FEATURE.TABLE_OPERATION」
- [SPARK-43284] [SC-130313] URLエンコードされた文字列に戻す
- [SPARK-43492] [SC-131227][sql] 3引数関数エイリアスを追加
DATE_ADDDATE_DIFF - [SPARK-43473 ] [SC-131372][Python] pandas DataFrameからの createDataFrame で構造体型をサポート
- [SPARK-43386] [SC-131110][sql]
UNRESOLVED_COLUMN.WITH_SUGGESTIONエラークラスの推奨列/属性のリストを改善 - [SPARK-43443] [SC-131332][sql] 無効な値を使用する場合のタイムスタンプ型推論のベンチマークを追加
- [SPARK-43518] [SC-131420][sql]
_LEGACY_ERROR_TEMP_2029をINTERNAL_ERRORに変換する - [SPARK-42604] [SC-130648][connect] functions.typedlit を実装
- [SPARK-42323] [ES-669513] 「[SC-123479][sql]
_LEGACY_ERROR_TEMP_2332に名前を割り当てる」を元に戻す - [SPARK-43357] [SC-130649][sql] フィルター日付タイプ引用日付
- [SPARK-43410] [SC-130526][sql] パックされたskipValuesのベクトル化されたループを改善
- [SPARK-43441] [SC-130995][core] DeterministicLevel がない場合
makeDotNode失敗しないようにする必要があります - [SPARK-43324] [SC-130455][sql] デルタベースのハンドル UPDATE コマンド
- [SPARK-43272] [SC-131168][core] リフレクションの代わりに
createFileを直接呼び出す - [SPARK-43296] [13.x][sc-130627][接続][Python] Spark Connect セッションのエラーをエラークラスに移行します
- [SPARK-43405] [SC-130987][sql] 不要な
getRowFormatSQL、inputRowFormatSQL、outputRowFormatSQLメソッドを削除 - [SPARK-43447] [SC-131017][r] R 4.3.0をサポート
- [SPARK-43425] [SC-130981][sql]
TimestampNTZTypeを追加ColumnarBatchRow - [SPARK-41532] [SC-130523][接続][CLIENT] 複数のデータフレームが関与する操作のチェックを追加
- [SPARK-43262] [SC-129270][connect][SS][Python] Spark Connect構造化ストリーミングエラーをエラークラスに移行
- [SPARK-42992] [13.x][sc-129465][Python] PySparkRuntimeError を導入
- [SPARK-43422] [SC-130982][sql] メタデータ出力でLogicalRelationのタグを保持する
- [SPARK-43390] [SC-130646][sql] DSv2により、CTAS/RTASがスキーマのnull可能性を予約できる
- [SPARK-43430] [SC-130989][接続][PROTO] ExecutePlanRequestは、任意のリクエストオプションをサポートします。
- [SPARK-43313] [SC-130254][sql] MERGE INSERTアクションに欠落している列のデフォルト値を追加
- [SPARK-42842] [SC-130438][sql] エラークラス _LEGACY_ERROR_TEMP_2006 を REGEX_GROUP_INDEX にマージします
- [SPARK-43377] [SC-130405][sql] デフォルトで
spark.sql.thriftServer.interruptOnCancelを有効にする - [SPARK-43292] [SC-130525][core][CONNECT]
ExecutorClassLoaderをcoreモジュールに移動して簡素化Executor#addReplClassLoaderIfNeeded - [SPARK-43040] [SC-130310][sql] JDBC データソースの TimestampNTZ 型サポートを改善
- [SPARK-43343] [SC-130629][ss] FileStreamSourceは、データソースの作成時に追加のファイルグロブチェックを無効にするべきだ
- [SPARK-43312] [SC-130294][protobuf] 任意のフィールドをJSONに変換するオプション
- [SPARK-43404] [SC-130586][ss] ID 不一致エラーを回避するために、同じバージョンの RocksDB 状態ストアの sst ファイルの再利用をスキップします
- [SPARK-43397] [SC-130614][core]
executorLostメソッドでエグゼキューターのデコミッション期間をログに記録 - [SPARK-42388 ] [SC-128568] [SQL] ベクトル化されたリーダーでparquetのフッターを2回読み取らないようにする
- [SPARK-43306] [13.x] [sc-130320] [Python] Spark SQL 型から ValueError をエラークラスに移行する
- [SPARK-43337] [SC-130353][ui][3.4] 列を並べ替えるための昇順/説明矢印アイコンがテーブル列に表示されません
- [SPARK-43279] [SC-130351][core] 未使用のメンバーをクリーンアップ
SparkHadoopUtil - [SPARK-43250] [SC-130147][sql] エラークラス
_LEGACY_ERROR_TEMP_2014を内部エラーに置き換えてください - [SPARK-43363] [SC-130299][sql][Python] 矢印タイプが提供されていない場合にのみ、カテゴリタイプへの
astypeを呼び出すようにする - [SPARK-43261] [SC-130154]Python] Spark SQL タイプからエラークラスへの
TypeError移行 - [SPARK-41971 ] [SC-130230][SQL][Python] pandas 変換の構造体型への変換方法の処理方法に関する設定を追加
- [SPARK-43381] [SC-130464][connect] 'transformStatCov' を遅延させる
- [SPARK-43362] [SC-130481][sql] MySQLコネクタのJSONタイプの特別な処理
- [SPARK-42843] [SC-130196][sql] エラークラス_LEGACY_ERROR_TEMP_2007をREGEX_GROUP_INDEXに更新
- [SPARK-42585] [SC-129968][connect] ローカルリレーションのストリーミング
- [SPARK-43181] [SC-130476][sql]
spark-sqlシェルでUI WebURLを表示する - [SPARK-43051] [SC-130194][connect] デフォルト値を出力するオプションを追加
- [SPARK-43204] [SC-129296][sql] MERGEの割り当てをテーブル属性に整列させる
- [SPARK-43348] [ SC-130082] [Python] PyPy3 でのサポート
Python 3.8 - [SPARK-42845] [SC-130078][sql] エラークラス_LEGACY_ERROR_TEMP_2010をInternalErrorに更新
- [SPARK-43211] [SC-128978][hive] IsolatedClientLoaderのHadoop2サポートを削除
システム環境
- オペレーティングシステム : Ubuntu 22.04.2 LTS
- Java の:Zulu 8.70.0.23-CA-linux64
- Scala : 2.12.15
- Pythonの :3.10.12
- R :4.2.2
- Delta Lake : 2.4.0
インストール済み Python ライブラリ
ライブラリ | バージョン | ライブラリ | バージョン | ライブラリ | バージョン |
|---|---|---|---|---|---|
appdirs (英語) | 1.4.4 | アルゴン2-CFFI | 21.3.0 | argon2-cffi-結合 | 21.2.0 |
アストトークンズ | 2.2.1 | 属性 | 21.4.0 | バックコール | 0.2.0 |
美しいスープ4 | 4.11.1 | 黒い | 22.6.0 | ブリーチ | 4.1.0 |
ウィンカー | 1.4 | ボト3 | 1.24.28 | ボトコア | 1.27.28 |
認証 | 2022.9.14 | cffi | 1.15.1 | シャルデ | 4.0.0 |
文字セット・ノーマライザー | 2.0.4 | クリック | 8.0.4 | 暗号化手法 | 37.0.1 |
サーマルサイクラー | 0.11.0 | シトン | 0.29.32 | Databricks の SDK | 0.1.6 |
DBUSPython | 1.2.18 | デバッグ | 1.5.1 | デコレータ | 5.1.1 |
デフューズドXML | 0.7.1 | ディストリビューション | 0.3.6 | docstring-to-markdown | 0.12 |
エントリポイント | 0.4 | 実行 | 1.2.0 | facets-概要 | 1.0.3 |
fastjsonスキーマ | 2.16.3 | ファイルロック | 3.12.0 | fonttools | 4.25.0 |
googleapis-common-protos | 1.56.4 | grpcio | 1.48.1 | grpcio-ステータス | 1.48.1 |
httplib2の | 0.20.2 | イドナ | 3.3 | importlib-metadata | 4.6.4 |
ipykernel(英語) | 6.17.1 | アイパイソン | 8.10.0 | ipython-genutils | 0.2.0 |
ipywidgets | 7.7.2 | ジェダイ | 0.18.1 | ジープニー | 0.7.1 |
ジンジャ2 | 2.11.3 | jmespathの | 0.10.0 | ジョブリブ | 1.2.0 |
jsonschema(jsonschema) | 4.16.0 | jupyter-クライアント | 7.3.4 | jupyter_core | 4.11.2 |
jupyterlab-pygmentsの | 0.1.2 | jupyterlab-widgetsの | 1.0.0 | キーリング | 23.5.0 |
キウイソルバー | 1.4.2 | ローンチパッドリブ | 1.10.16 | lazr.restfulクライアント | 0.14.4 |
lazr.uri です。 | 1.0.6 | マークアップセーフ | 2.0.1 | Matplotlib | 3.5.2 |
matplotlib-インライン | 0.1.6 | マッケイブ | 0.7.0 | ミスチューン | 0.8.4 |
もっと-itertools | 8.10.0 | mypy-extensions | 0.4.3 | NBクライアント | 0.5.13 |
NBコンバート | 6.4.4 | NBフォーマット | 5.5.0 | ネスト-アシンシオ | 1.5.5 |
ノードenv | 1.8.0 | ノートブック | 6.4.12 | ナムピー | 1.21.5 |
OAuthlib | 3.2.0 | 包装 | 21.3 | pandas | 1.4.4 |
pandocフィルター | 1.5.0 | パルソ | 0.8.3 | パススペック | 0.9.0 |
パッツィ | 0.5.2 | pexpect | 4.8.0 | ピクルシェア | 0.7.5 |
枕 | 9.2.0 | 種 | 22.2.2 | プラットフォームディレクトリ | 2.5.2 |
Plotly | 5.9.0 | プラギー | 1.0.0 | prometheus-クライアント | 0.14.1 |
プロンプトツールキット | 3.0.36 | プロトブフ | 3.19.4 | psutil の | 5.9.0 |
サイコップ2 | 2.9.3 | PTYPROCESSの | 0.7.0 | ピュア評価 | 0.2.2 |
ピアロー | 8.0.0 | pycparser | 2.21 | ピダンティック | 1.10.6 |
パイフレーク | 3.0.1 | ピグメント | 2.11.2 | PyGObject | 3.42.1 |
PyJWTの | 2.3.0 | pyodbc | 4.0.32 | pyparsing (英語) | 3.0.9 |
パイライト | 1.1.294 | ピルシステント | 0.18.0 | Python-dateutil | 2.8.2 |
Python-lsp-jsonrpc | 1.0.0 | Python-lsp-server | 1.7.1 | pytoolconfig(ピーツールコンフィグ) | 1.2.2 |
ピッツ | 2022.1 | ピズム | 23.2.0 | 要求 | 2.28.1 |
縄 | 1.7.0 | S3トランスファー | 0.6.0 | Scikit-Learn | 1.1.1 |
scipy(サイピー) | 1.9.1 | シーボーン | 0.11.2 | シークレットストレージ | 3.3.1 |
Send2Trash(センド2トラッシュ) | 1.8.0 | セットアップツール | 63.4.1 | 6 | 1.16.0 |
スープふるい | 2.3.1 | ssh-import-id | 5.11 | スタックデータ | 0.6.2 |
統計モデル | 0.13.2 | 持久力 | 8.1.0 | テルミナド | 0.13.1 |
テストパス | 0.6.0 | スレッドプールctl | 2.2.0 | トークン化-RT | 4.2.1 |
トムリ | 2.0.1 | 竜巻 | 6.1 | トレイトレット | 5.1.1 |
typing_extensions | 4.3.0 | ujson | 5.4.0 | 無人アップグレード | 0.1 |
urllib3 の | 1.26.11 | virtualenv | 20.16.3 | ワドリブ | 1.3.6 |
WC幅 | 0.2.5 | webエンコーディング | 0.5.1 | パッチ | 1.0.2 |
輪 | 0.37.1 | widgetsnb拡張機能 | 3.6.1 | ヤップ | 0.31.0 |
ジップ | 1.0.0 |
インストールされている R ライブラリ
R ライブラリは、2023-02-10 の Microsoft CRAN スナップショットからインストールされます。
ライブラリ | バージョン | ライブラリ | バージョン | ライブラリ | バージョン |
|---|---|---|---|---|---|
矢 | 10.0.1 | アスクパス | 1.1 | assertthat | 0.2.1 |
バックポート | 1.4.1 | 基 | 4.2.2 | base64enc | 0.1-3 |
bit | 4.0.5 | ビット64 | 4.0.5 | ブロッブ | 1.2.3 |
ブート | 1.3-28 | 醸成 | 1.0-8 | ブリオ | 1.1.3 |
箒 | 1.0.3 | bslibの | 0.4.2 | カケム | 1.0.6 |
コール | 3.7.3 | キャレット | 6.0-93 | セルレンジャー | 1.1.0 |
クロン | 2.3-59 | クラス | 7.3-21 | CLI | 3.6.0 |
clipr | 0.8.0 | 時計 | 0.6.1 | クラスター | 2.1.4 |
コードツール | 0.2-19 | カラースペース | 2.1-0 | コモンマーク | 1.8.1 |
コンパイラ | 4.2.2 | コンフィグ | 0.3.1 | CPP11の | 0.4.3 |
クレヨン | 1.5.2 | 資格情報 | 1.3.2 | Curl | 5.0.0 |
データ.テーブル | 1.14.6 | データセット | 4.2.2 | DBI | 1.1.3 |
dbplirの | 2.3.0 | DESC | 1.4.2 | 開発ツール | 2.4.5 |
ディフobj | 0.3.5 | ダイジェスト | 0.6.31 | ダウンライト | 0.4.2 |
dplyrの | 1.1.0 | DTPLyr | 1.2.2 | E1071 | 1.7-13 |
省略記号 | 0.3.2 | 評 | 0.20 | ファンシ | 1.0.4 |
ファーバー | 2.1.1 | ファストマップ | 1.1.0 | フォントオーサム | 0.5.0 |
フォーキャッツ | 1.0.0 | For each | 1.5.2 | 外国の | 0.8-82 |
鍛える | 0.2.0 | FSの | 1.6.1 | 未来 | 1.31.0 |
future.お申込み | 1.10.0 | 嗽 | 1.3.0 | ジェネリック | 0.1.3 |
ゲルト | 1.9.2 | ggplot2の | 3.4.0 | gh | 1.3.1 |
ギットレッズ | 0.1.2 | glmnet | 4.1-6 | グローバル | 0.16.2 |
膠 | 1.6.2 | グーグルドライブ | 2.0.0 | グーグルシート4 | 1.0.1 |
ガウアー | 1.0.1 | グラフィックス | 4.2.2 | grDevicesの | 4.2.2 |
グリッド | 4.2.2 | グリッドエクストラ | 2.3 | gsubfnの | 0.7 |
GTABLE(GTABLE) | 0.3.1 | ヘルメット | 1.2.0 | 避難所 | 2.5.1 |
高い | 0.10 | HMSの | 1.1.2 | htmlツール[htmltools] | 0.5.4 |
htmlウィジェット | 1.6.1 | httpuv | 1.6.8 | httr | 1.4.4 |
ids | 1.0.1 | イニ | 0.3.1 | イプレッド | 0.9-13 |
アイソバンド | 0.2.7 | 反復 子 | 1.0.14 | jquerylib | 0.1.4 |
jsonlite | 1.8.4 | カーンスムース | 2.23-20 | ニット | 1.42 |
ラベリング | 0.4.2 | あとで | 1.3.0 | 格子 | 0.20-45 |
溶岩 | 1.7.1 | ライフサイクル | 1.0.3 | リッスン | 0.9.0 |
ルブリデート | 1.9.1 | マグリット | 2.0.3 | Markdown | 1.5 |
質量 | 7.3-58.2 | マトリックス | 1.5-1 | メモ | 2.0.1 |
メソッド | 4.2.2 | mgcv | 1.8-41 | マイム | 0.12 |
ミニUI | 0.1.1.1 | モデルメトリクス | 1.2.2.2 | モデラー | 0.1.10 |
マンセル | 0.5.0 | nlme | 3.1-162 | ネット | 7.3-18 |
numDerivの | 2016.8-1.1 | オープンSSL | 2.0.5 | 並列 | 4.2.2 |
並行して | 1.34.0 | 柱 | 1.8.1 | pkgbuild の | 1.4.0 |
pkgconfig | 2.0.3 | pkgdown (英語) | 2.0.7 | pkgload(パッケージロード) | 1.3.2 |
plogrの | 0.2.0 | プライル | 1.8.8 | 褒める | 1.0.0 |
プリティユニット | 1.1.1 | pROC | 1.18.0 | プロセスX | 3.8.0 |
製品 | 2019.11.13 | プロヴィス | 0.3.7 | 経過 | 1.2.2 |
プログレッサー | 0.13.0 | 約束 | 1.2.0.1 | プロト | 1.0.0 |
プロキシ | 0.4-27 | PS | 1.7.2 | ゴロゴロ | 1.0.1 |
R2D3の | 0.2.6 | R6の | 2.5.1 | ラグ | 1.2.5 |
ランダムフォレスト | 4.7-1.1 | ラプディレクトリ | 0.3.3 | rcmdcheckの | 1.4.0 |
RColorブリューワー | 1.1-3 | Rcpp | 1.0.10 | RcppEigen | 0.3.3.9.3 |
読み取り | 2.1.3 | readxlの | 1.4.2 | レシピ | 1.0.4 |
再戦 | 1.0.1 | 再戦2 | 2.1.2 | リモコン | 2.4.2 |
レプレックス | 2.0.2 | 形状変更2 | 1.4.4 | ラン | 1.0.6 |
rmarkdown | 2.20 | RODBC | 1.3-20 | リオキシジェン2 | 7.2.3 |
rpart | 4.1.19 | rprojroot さん | 2.0.3 | サーブ | 1.8-12 |
RSQLite (英語) | 2.2.20 | rstudioapi | 0.14 | rversions | 2.1.2 |
アヴェスト | 1.0.3 | サス | 0.4.5 | 秤 | 1.2.1 |
セレクタ | 0.4-2 | セッション情報 | 1.2.2 | 形 | 1.4.6 |
shiny | 1.7.4 | ソースツール | 0.1.7-1 | sparklyr | 1.7.9 |
SparkR | 3.4.0 | 空間的 | 7.3-15 | スプライン | 4.2.2 |
sqldf | 0.4-11 | スクエアム | 2021.1 | 統計 | 4.2.2 |
統計4 | 4.2.2 | ストリンギ | 1.7.12 | ストリンガー | 1.5.0 |
生存 | 3.5-3 | SYSの | 3.4.1 | システムフォント | 1.0.4 |
tcltk | 4.2.2 | テストを | 3.1.6 | テキストシェーピング | 0.3.6 |
ティブル | 3.1.8 | ティディル | 1.3.0 | ティディセレクト | 1.2.0 |
ティディバース | 1.3.2 | 時間変更 | 0.2.0 | 日時 | 4022.108 |
タイニーテックス | 0.44 | ツール | 4.2.2 | tzdb | 0.3.0 |
urlchecker(英語) | 1.0.1 | usethisさん | 2.1.6 | UTF8 | 1.2.3 |
ユーティリティ | 4.2.2 | UUIDの | 1.1-0 | vctrs | 0.5.2 |
viridisライト | 0.4.1 | ブルーム | 1.6.1 | ワルド | 0.4.0 |
ウイスカー | 0.4.1 | ウィザー | 2.5.0 | xfun | 0.37 |
XML2の | 1.3.3 | xopen(オーペン) | 1.0.0 | エクステーブル | 1.8-4 |
ヤムラ | 2.3.7 | 郵便番号 | 2.2.2 |
インストール済み Java and Scala ライブラリ (Scala 2.12 クラスター版)
グループID | アーティファクト ID | バージョン |
|---|---|---|
アントル | アントル | 2.7.7 |
com.amazonawsの | Amazon-kinesis-client | 1.12.0 |
com.amazonawsの | aws-java-sdk-オートスケール | 1.12.390 |
com.amazonawsの | aws-java-sdk-cloudformation | 1.12.390 |
com.amazonawsの | aws-java-sdk-cloudfront | 1.12.390 |
com.amazonawsの | aws-java-sdk-cloudhsm | 1.12.390 |
com.amazonawsの | aws-java-sdk-cloudsearch(英語) | 1.12.390 |
com.amazonawsの | aws-java-sdk-cloudtrail | 1.12.390 |
com.amazonawsの | aws-java-sdk-cloudwatch | 1.12.390 |
com.amazonawsの | aws-java-sdk-cloudwatchメトリクス | 1.12.390 |
com.amazonawsの | aws-java-sdk-コードデプロイ | 1.12.390 |
com.amazonawsの | aws-java-sdk-cognitoアイデンティティ | 1.12.390 |
com.amazonawsの | aws-java-sdk-cognitosync | 1.12.390 |
com.amazonawsの | aws-java-sdk-configの | 1.12.390 |
com.amazonawsの | aws-java-sdk-コア | 1.12.390 |
com.amazonawsの | aws-java-sdk-データパイプライン | 1.12.390 |
com.amazonawsの | aws-java-sdk-directconnectの | 1.12.390 |
com.amazonawsの | aws-java-sdkディレクトリ | 1.12.390 |
com.amazonawsの | aws-java-sdk-ダイナモDB | 1.12.390 |
com.amazonawsの | aws-java-sdk-ec2 の | 1.12.390 |
com.amazonawsの | aws-java-sdk-ecsの | 1.12.390 |
com.amazonawsの | aws-java-sdk-efs | 1.12.390 |
com.amazonawsの | aws-java-sdk-elasticache | 1.12.390 |
com.amazonawsの | aws-java-sdk-elasticbeanstalk | 1.12.390 |
com.amazonawsの | aws-java-sdk-elasticloadbalancing | 1.12.390 |
com.amazonawsの | aws-java-sdk-elasticトランスコーダー | 1.12.390 |
com.amazonawsの | aws-java-sdk-emr | 1.12.390 |
com.amazonawsの | aws-java-sdk-glacier | 1.12.390 |
com.amazonawsの | aws-java-sdk-グルー | 1.12.390 |
com.amazonawsの | aws-java-sdk-iam | 1.12.390 |
com.amazonawsの | aws-java-sdk-importexport | 1.12.390 |
com.amazonawsの | aws-java-sdk-キネシス | 1.12.390 |
com.amazonawsの | aws-java-sdk-kmsの | 1.12.390 |
com.amazonawsの | aws-java-sdk-ラムダ | 1.12.390 |
com.amazonawsの | aws-java-sdk-logs | 1.12.390 |
com.amazonawsの | aws-java-sdk-機械学習 | 1.12.390 |
com.amazonawsの | aws-java-sdk-opsworks | 1.12.390 |
com.amazonawsの | aws-java-sdk-rds | 1.12.390 |
com.amazonawsの | aws-java-sdk-レッドシフト | 1.12.390 |
com.amazonawsの | aws-java-sdk-ルート53 | 1.12.390 |
com.amazonawsの | aws-java-sdk-s3 の | 1.12.390 |
com.amazonawsの | aws-java-sdk-ses | 1.12.390 |
com.amazonawsの | aws-java-sdk-simpledb | 1.12.390 |
com.amazonawsの | aws-java-sdk-シンプルなワークフロー | 1.12.390 |
com.amazonawsの | aws-java-sdk-snsの | 1.12.390 |
com.amazonawsの | aws-java-sdk-sqs | 1.12.390 |
com.amazonawsの | aws-java-sdk-ssm | 1.12.390 |
com.amazonawsの | aws-java-sdk-storagegateway | 1.12.390 |
com.amazonawsの | aws-java-sdk-sts | 1.12.390 |
com.amazonawsの | aws-java-sdk-サポート | 1.12.390 |
com.amazonawsの | aws-java-sdk-swf-ライブラリ | 1.11.22 |
com.amazonawsの | aws-java-sdk-ワークスペース | 1.12.390 |
com.amazonawsの | jmespath-java | 1.12.390 |
com.clearspring.アナリティクス | stream | 2.9.6 |
com.databricksの | サーブ | 1.8-3 |
com.databricksの | ジェット3t | 0.7.1-0 |
com.databricks.scalapb | compilerplugin_2.12 | 0.4.15-10 |
com.databricks.scalapb | scalapbのruntime_2.12 | 0.4.15-10 |
com.esotericソフトウェア | kryo-shaded(クリョシェード) | 4.0.2 |
com.esotericソフトウェア | ミンログ | 1.3.0 |
com.fasterxmlの | クラスメイト | 1.3.4 |
com.fasterxml.jackson.core | ジャクソン-注釈 | 2.14.2 |
com.fasterxml.jackson.core | ジャクソンコア | 2.14.2 |
com.fasterxml.jackson.core | ジャクソン-データバインド | 2.14.2 |
com.fasterxml.jackson.dataformat | ジャクソン-データフォーマット-CBOR | 2.14.2 |
com.fasterxml.jackson.datatype | ジャクソン-データ型-JODA | 2.14.2 |
com.fasterxml.jackson.datatype | ジャクソン-データ型-JSR310 | 2.13.4 |
com.fasterxml.jackson.module | ジャクソン-モジュール-パラナマー | 2.14.2 |
com.fasterxml.jackson.module | ジャクソンモジュール-Scala.12 | 2.14.2 |
com.github.ben-manes.caffeine | カフェイン | 2.9.3 |
com.github.fommil (英語) | Jniloader | 1.1 |
com.github.fommil.netlib (英語) | native_ref-ジャワ | 1.1 |
com.github.fommil.netlib (英語) | native_ref-ジャワ | 1.1-ネイティブ |
com.github.fommil.netlib (英語) | native_system-Javaの | 1.1 |
com.github.fommil.netlib (英語) | native_system-Javaの | 1.1-ネイティブ |
com.github.fommil.netlib (英語) | netlib-native_ref-linux-x86_64 | 1.1-ネイティブ |
com.github.fommil.netlib (英語) | netlib-native_system-linux-x86_64 | 1.1-ネイティブ |
com.github.luben | ZSTD-JNI | 1.5.2-5 |
com.github.wendykierp (英語) | JTransformsの | 3.1 |
com.google.code.findbugs | JSR305 | 3.0.0 |
com.google.code.gson(英語) | gson | 2.8.9 |
com.google.crypto.tink | ティンク | 1.7.0 |
com.google.errorが発生しやすい | error_prone_annotations | 2.10.0 |
com.google.flatbuffers | フラットバッファ-Java | 1.12.0 |
com.google.guava | グアバ | 15.0 |
com.google.protobuf | protobuf-java | 2.6.1 |
com.h2データベース | H2 | 2.1.214 |
com.helger | プロファイラー | 1.1.1 |
com.jcraftの | jsch | 0.1.55 |
com.jolboxの | ボーンカップ | 0.8.0.リリース |
com.lihaoyi | sourcecode_2月12日 | 0.1.9 |
com.microsoft.azure | azure-データレイク-store-sdk | 2.3.9 |
com.microsoft.sqlserver | mssqlの-JDBC | 11.2.2.JRE8 |
com.ningの | 圧縮-LZF | 1.1.2 |
com.sun.mail | javax.mail | 1.5.2 |
com.sun.xml.バインド | jaxb-コア | 2.2.11 |
com.sun.xml.バインド | jaxb-impl | 2.2.11 |
com.tdunning | JSON | 1.8 |
com.thoughtworks.paranamer | パラナマー | 2.8 |
com.trueaccord.lensesの | lenses_2.12 | 0.4.12 |
コム。囀る | チルジャワ | 0.10.0 |
コム。囀る | chill_2.12 | 0.10.0 |
コム。囀る | util-app_2.12 | 7.1.0 |
コム。囀る | util-core_2.12 | 7.1.0 |
コム。囀る | util-function_2.12 | 7.1.0 |
コム。囀る | util-jvm_2.12 | 7.1.0 |
コム。囀る | util-lint_2.12 | 7.1.0 |
コム。囀る | util-registry_2.12 | 7.1.0 |
コム。囀る | util-stats_2.12 | 7.1.0 |
com.タイプセーフ | コンフィグ | 1.2.1 |
Scala-logging | Scala-logging_2.12 | 3.7.2 |
com.uberの | H3 | 3.7.0 |
com.univocityの | univocity-パーサー | 2.9.1 |
com.zaxxerの | ひかりCP | 4.0.3 |
コモンズCLI | コモンズCLI | 1.5.0 |
コモンズコーデック | コモンズコーデック | 1.15 |
コモンズコレクション | コモンズコレクション | 3.2.2 |
コモンズ-DBCP | コモンズ-DBCP | 1.4 |
コモンズファイルアップロード | コモンズファイルアップロード | 1.5 |
commons-httpクライアント | commons-httpクライアント | 3.1 |
コモンズ-IO | コモンズ-IO | 2.11.0 |
コモンズ-ラング | コモンズ-ラング | 2.6 |
コモンズロギング | コモンズロギング | 1.1.3 |
コモンズプール | コモンズプール | 1.5.4 |
dev.ludovic.netlib さん | アーパック | 3.0.3 |
dev.ludovic.netlib さん | ブラス | 3.0.3 |
dev.ludovic.netlib さん | ラパック | 3.0.3 |
info.ganglia.gmetric4j | gmetric4jの | 1.0.10 |
io.エアリフト | エアコンプレッサー | 0.21 |
io.delta | デルタシェアリング-spark_2.12 | 0.7.0 |
io.dropwizard.メトリクス | メトリクスコア | 4.2.10 |
io.dropwizard.メトリクス | メトリクス-グラファイト | 4.2.10 |
io.dropwizard.メトリクス | メトリクス-healthchecks | 4.2.10 |
io.dropwizard.メトリクス | メトリクス-jetty9 | 4.2.10 |
io.dropwizard.メトリクス | メトリクス-JMX | 4.2.10 |
io.dropwizard.メトリクス | メトリクス-JSON | 4.2.10 |
io.dropwizard.メトリクス | メトリクス-JVM | 4.2.10 |
io.dropwizard.メトリクス | メトリクスサーブレット | 4.2.10 |
io.nettyの | netty-すべて | 4.1.87.最終版 |
io.nettyの | netty-buffer | 4.1.87.最終版 |
io.nettyの | netty-codec (英語) | 4.1.87.最終版 |
io.nettyの | netty-codec-http | 4.1.87.最終版 |
io.nettyの | netty-codec-http2 | 4.1.87.最終版 |
io.nettyの | netty-codec-socksの | 4.1.87.最終版 |
io.nettyの | netty-共通 | 4.1.87.最終版 |
io.nettyの | netty-ハンドラ | 4.1.87.最終版 |
io.nettyの | netty-handler-proxy | 4.1.87.最終版 |
io.nettyの | netty-リゾルバ | 4.1.87.最終版 |
io.nettyの | netty-トランスポート | 4.1.87.最終版 |
io.nettyの | netty-transport-classes-epoll | 4.1.87.最終版 |
io.nettyの | netty-transport-classes-kqueue | 4.1.87.最終版 |
io.nettyの | netty-transport-native-epoll | 4.1.87.最終版 |
io.nettyの | netty-transport-native-epoll | 4.1.87.最終版-linux-aarch_64 |
io.nettyの | netty-transport-native-epoll | 4.1.87.最終版 - linuxのx86_64 |
io.nettyの | netty-transport-native-kqueue | 4.1.87.ファイナルOSX-aarch_64 |
io.nettyの | netty-transport-native-kqueue | 4.1.87.ファイナルOSX-x86_64 |
io.nettyの | netty-transport-native-unix-common | 4.1.87.最終版 |
io.プロメテウス | シンプルクライアント | 0.7.0 |
io.プロメテウス | simpleclient_common | 0.7.0 |
io.プロメテウス | simpleclient_dropwizard | 0.7.0 |
io.プロメテウス | simpleclient_pushgateway | 0.7.0 |
io.プロメテウス | simpleclient_servlet | 0.7.0 |
io.prometheus.jmx | 収集家 | 0.12.0 |
jakarta.annotation | jakarta.annotation-api | 1.3.5 |
jakarta.servlet (英語) | jakarta.servlet-api | 4.0.3 |
jakarta.validation(ジャカルタ検証) | jakarta.validation-api | 2.0.2 |
jakarta.ws.rs | jakarta.ws.rs-api | 2.1.6 |
javax.activationの | アクティベーション | 1.1.1 |
javax.el | javax.el-api | 2.2.4 |
javax.jdo | jdo-api | 3.0.1 |
javax.transaction | jta | 1.1 |
javax.transaction | トランザクションAPI | 1.1 |
javax.xml.バインド | ヤックスビーAPI | 2.2.11 |
ジャボリューション | ジャボリューション | 5.5.1 |
ジェイライン | ジェイライン | 2.14.6 |
ジョダタイム | ジョダタイム | 2.12.1 |
ml.combust.mleap | mleap-databricks-runtime_2.12 | v0.20.0-db2 |
net.java.dev.jna | jna | 5.8.0 |
net.razorvine | 漬ける | 1.3 |
net.sf.jpam (英語) | JPAMの | 1.1 |
net.sf.opencsv | opencsvの | 2.3 |
net.sf.supercsv (英語) | スーパーCSV | 2.2.0 |
ネット.スノーフレーク | snowflake-ingest-sdk | 0.9.6 |
ネット.スノーフレーク | スノーフレーク-JDBC | 3.13.29 |
net.sourceforge.f2j (英語) | arpack_combined_all | 0.1 |
org.acplt.remoteteaの | リモートTEA-ONCRPC | 1.1.2 |
org.antlr | ST4の | 4.0.4 |
org.antlr | antlrランタイム | 3.5.2 |
org.antlr | antlr4ランタイム | 4.9.3 |
org.antlr | 文字列テンプレート | 3.2.1 |
org.apache.ant | 蟻 | 1.9.16 |
org.apache.ant | アントJSCH | 1.9.16 |
org.apache.ant | アントランチャー | 1.9.16 |
org.apache.arrow(アパッチ・アロー) | arrow-format | 11.0.0 |
org.apache.arrow(アパッチ・アロー) | arrow-memory-core | 11.0.0 |
org.apache.arrow(アパッチ・アロー) | arrow-memory-netty | 11.0.0 |
org.apache.arrow(アパッチ・アロー) | arrow-vector | 11.0.0 |
org.apache.avro | AVRO | 1.11.1 |
org.apache.avro | アブロIPC | 1.11.1 |
org.apache.avro | アブロマップド | 1.11.1 |
org.apache.commonsの | コモンズコレクション4 | 4.4 |
org.apache.commonsの | コモンズ圧縮 | 1.21 |
org.apache.commonsの | コモンズ-クリプト | 1.1.0 |
org.apache.commonsの | コモンズ-LANG3 | 3.12.0 |
org.apache.commonsの | コモンズ-数学3 | 3.6.1 |
org.apache.commonsの | コモンズテキスト | 1.10.0 |
org.apache.curator (英語) | キュレーター・クライアント | 2.13.0 |
org.apache.curator (英語) | キュレーターフレームワーク | 2.13.0 |
org.apache.curator (英語) | キュレーターレシピ | 2.13.0 |
org.apache.datasketches (英語) | データスケッチ-Java | 3.1.0 |
org.apache.datasketches (英語) | datasketches-memory | 2.0.0 |
org.apache.derbyの | ダービー | 10.14.2.0 |
org.apache.hadoop です。 | hadoop クライアント ランタイム | 3.3.4 |
org.apache.hive です。 | ハイブビーライン | 2.3.9 |
org.apache.hive です。 | ハイブ CLI | 2.3.9 |
org.apache.hive です。 | ハイブ-JDBC | 2.3.9 |
org.apache.hive です。 | ハイブ - llap クライアント | 2.3.9 |
org.apache.hive です。 | ハイブ - llap - 共通 | 2.3.9 |
org.apache.hive です。 | ハイブセルデ | 2.3.9 |
org.apache.hive です。 | ハイブシム | 2.3.9 |
org.apache.hive です。 | ハイブストレージAPI | 2.8.1 |
org.apache.hive.shims | ハイブシム-0.23 | 2.3.9 |
org.apache.hive.shims | ハイブシム-共通 | 2.3.9 |
org.apache.hive.shims | ハイブシムススケジューラ | 2.3.9 |
org.apache.httpコンポーネント | httpクライアント | 4.5.14 |
org.apache.httpコンポーネント | httpコア | 4.4.16 |
org.apache.ivy | 蔦 | 2.5.1 |
org.apache.logging.log4j | ログ4J-1.2-API | 2.19.0 |
org.apache.logging.log4j | ログ4J-API | 2.19.0 |
org.apache.logging.log4j | log4j-コア | 2.19.0 |
org.apache.logging.log4j | log4j-slf4j2-impl | 2.19.0 |
org.apache.mesos | メソス | 1.11.0-シェード-protobuf |
org.apache.orc | オークコア | 1.8.3-シェード-protobuf |
org.apache.orc | orc-mapreduce | 1.8.3-シェード-protobuf |
org.apache.orc | オークシム | 1.8.3 |
org.apache.thrift | libfb303の | 0.9.3 |
org.apache.thrift | リブスリフト | 0.12.0 |
org.apache.xbean | xbean-asm9-shaded (英語) | 4.22 |
org.apache.yetus (英語) | オーディエンスアノテーション | 0.13.0 |
org.apache.zookeeper | 動物園の飼育係 | 3.6.3 |
org.apache.zookeeper | 動物園の飼育係ジュート | 3.6.3 |
org.checkerフレームワーク | チェッカークォール | 3.19.0 |
org.codehaus.jackson | ジャクソン-コア-ASL | 1.9.13 |
org.codehaus.jackson | ジャクソン-マッパー-ASL | 1.9.13 |
org.codehaus.janino | commons-コンパイラ | 3.0.16 |
org.codehaus.janino | ジャニーノ | 3.0.16 |
org.datanucleus (英語) | データ核-API-JDO | 4.2.4 |
org.datanucleus (英語) | データ核コア | 4.1.17 |
org.datanucleus (英語) | データ核-RDBMS | 4.1.19 |
org.datanucleus (英語) | javax.jdo | 3.2.0-m3 |
組織Eclipse.jetty | 桟橋クライアント | 9.4.50.v20221201 |
組織Eclipse.jetty | 桟橋の続き | 9.4.50.v20221201 |
組織Eclipse.jetty | 桟橋-HTTP | 9.4.50.v20221201 |
組織Eclipse.jetty | 桟橋-IO | 9.4.50.v20221201 |
組織Eclipse.jetty | 桟橋-JNDI | 9.4.50.v20221201 |
組織Eclipse.jetty | 桟橋プラス | 9.4.50.v20221201 |
組織Eclipse.jetty | 桟橋プロキシ | 9.4.50.v20221201 |
組織Eclipse.jetty | 桟橋警備 | 9.4.50.v20221201 |
組織Eclipse.jetty | 桟橋サーバー | 9.4.50.v20221201 |
組織Eclipse.jetty | 桟橋サーブレット | 9.4.50.v20221201 |
組織Eclipse.jetty | 桟橋サーブレット | 9.4.50.v20221201 |
組織Eclipse.jetty | 桟橋-util | 9.4.50.v20221201 |
組織Eclipse.jetty | 桟橋-util-ajax | 9.4.50.v20221201 |
組織Eclipse.jetty | 桟橋-webapp | 9.4.50.v20221201 |
組織Eclipse.jetty | 桟橋XML | 9.4.50.v20221201 |
組織Eclipse.jetty.websocket | websocket-api | 9.4.50.v20221201 |
組織Eclipse.jetty.websocket | websocket-クライアント | 9.4.50.v20221201 |
組織Eclipse.jetty.websocket | websocket-共通 | 9.4.50.v20221201 |
組織Eclipse.jetty.websocket | websocket-サーバー | 9.4.50.v20221201 |
組織Eclipse.jetty.websocket | websocket-サーブレット | 9.4.50.v20221201 |
org.fusesource.leveldbjni | レベルdbjni-すべて | 1.8 |
org.glassfish.hk2 | HK2-API | 2.6.1 |
org.glassfish.hk2 | HK2ロケーター | 2.6.1 |
org.glassfish.hk2 | hk2-utilsの | 2.6.1 |
org.glassfish.hk2 | osgi-リソースロケーター | 1.0.3 |
org.glassfish.hk2.external (英語) | AOPALLIANCE-再パッケージ化 | 2.6.1 |
org.glassfish.hk2.external (英語) | jakarta.inject です。 | 2.6.1 |
org.glassfish.jersey.containers | ジャージーコンテナサーブレット | 2.36 |
org.glassfish.jersey.containers | ジャージーコンテナサーブレットコア | 2.36 |
org.glassfish.jersey.coreの | ジャージークライアント | 2.36 |
org.glassfish.jersey.coreの | ジャージー共通 | 2.36 |
org.glassfish.jersey.coreの | ジャージーサーバー | 2.36 |
org.glassfish.jersey.inject | ジャージ-HK2 | 2.36 |
org.hibernate.validator | hibernate-validator | 6.1.7.ファイナル |
org.javassist | ジャバス奏者 | 3.25.0-GAの |
org.jboss.logging | jboss-ロギング | 3.3.2.ファイナル |
org.jdbi | DBI | 2.63.1 |
org.jetbrainsの | 注釈 | 17.0.0 |
org.joda | ジョダ変換 | 1.7 |
org.jodd さん | ジョッドコア | 3.5.2 |
org.json4sの | json4s-ast_2.12 | 3.7.0-M11 |
org.json4sの | json4s-core_2.12 | 3.7.0-M11 |
org.json4sの | json4s-jackson_2.12 | 3.7.0-M11 |
org.json4sの | json4s-scalap_2.12 | 3.7.0-M11 |
org.lz4 | LZ4-Javaの | 1.8.0 |
org.mariadb.JDBC | mariadb-java-クライアント | 2.7.4 |
org.mlflowの | mlflow-spark | 2.2.0 |
org.objenesis | オブジェネシス | 2.5.1 |
org.postgresql | PostgreSQL | 42.3.8 |
org.roaringbitmap | ロアリングビットマップ | 0.9.39 |
org.roaringbitmap | シム | 0.9.39 |
org.rocksdbの | ロックスDBJNI | 7.8.3 |
org.rosuda.REngine | レンジン | 2.1.0 |
組織Scala-lang | Scala-compiler_2.12 | 2.12.15 |
組織Scala-lang | Scala-Library.12 | 2.12.15 |
組織Scala-lang | Scala-reflect_2.12 | 2.12.15 |
組織Scala-lang.modules | Scalaコレクションcompat_2.12 | 2.4.3 |
組織Scala-lang.modules | Scala-parser-combinators_2.12 | 1.1.2 |
組織Scala-lang.modules | Scala-xml_2.12 | 1.2.0 |
組織Scala-sbt | テストインターフェース | 1.0 |
org.scalacheck | scalacheck_2.12 | 1.14.2 |
org.scalactic | scalactic_2.12 | 3.2.15 |
org.scalanlp | そよ風-macros_2.12 | 2.1.0 |
org.scalanlp | breeze_2.12 | 2.1.0 |
org.scalatestの | scalatest対応 | 3.2.15 |
org.scalatestの | scalatest-core_2.12 | 3.2.15 |
org.scalatestの | scalatest-diagrams_2.12 | 3.2.15 |
org.scalatestの | scalatest-featurespec_2.12 | 3.2.15 |
org.scalatestの | scalatest-flatspec_2.12 | 3.2.15 |
org.scalatestの | scalatest-freespec_2.12 | 3.2.15 |
org.scalatestの | scalatest-funspec_2.12 | 3.2.15 |
org.scalatestの | scalatest-funsuite_2.12 | 3.2.15 |
org.scalatestの | scalatest-matchers-core_2.12 | 3.2.15 |
org.scalatestの | scalatest-mustmatchers_2.12 | 3.2.15 |
org.scalatestの | scalatest-propspec_2.12 | 3.2.15 |
org.scalatestの | scalatest-refspec_2.12 | 3.2.15 |
org.scalatestの | scalatest-shouldmatchers_2.12 | 3.2.15 |
org.scalatestの | scalatest-wordspec_2.12 | 3.2.15 |
org.scalatestの | scalatest_2.12 | 3.2.15 |
org.slf4j | jcl-over-slf4j | 2.0.6 |
org.slf4j | 7月-slf4j | 2.0.6 |
org.slf4j | SLF4J-APIの | 2.0.6 |
org.threetenさん | スリーテンエクストラ | 1.7.1 |
org.tukaani | xz | 1.9 |
org.typelevel | algebra_2.12 | 2.0.1 |
org.typelevel | cats-kernel_2.12 | 2.1.1 |
org.typelevel | スパイア-macros_2.12 | 0.17.0 |
org.typelevel | スパイア-platform_2.12 | 0.17.0 |
org.typelevel | スパイア-util_2.12 | 0.17.0 |
org.typelevel | spire_2.12 | 0.17.0 |
org.wildfly.openssl | ワイルドフライ-openssl | 1.1.3.ファイナル |
org.xerial | sqlite-JDBC の | 3.42.0.0 |
org.xerial.snappy(英語) | スナッピージャワ | 1.1.8.4 |
org.yaml の | スネークヤム | 1.33 |
オロ | オロ | 2.0.8 |
pl.edu.icm | JLarge配列 | 1.5 |
ソフトウェア.Amazon.cryptools | AmazonCorrettoCryptoProvider | 1.6.1-linux-x86_64 |
ソフトウェア.Amazon.ion | イオンジャワ | 1.0.2 |
スタックス | スタックス-API | 1.0.1 |