Delta Lake テーブルの詳細を詳細に説明します
Delta テーブルに関する詳細情報 (ファイル数、データ サイズなど) は、 DESCRIBE DETAIL
を使用して取得できます。
DESCRIBE DETAIL '/data/events/'
DESCRIBE DETAIL eventsTable
Spark SQL 構文の詳細については、 DESCRIBE DETAIL を参照してください。
Scala/Java/Python 構文の詳細については、 Delta Lake API のドキュメント を参照してください。
詳細スキーマ
この操作の出力には、次のスキーマを持つ行が 1 つだけあります。
表示される列は、使用している Databricks Runtime のバージョンと、有効にしたテーブル機能によって異なります。
列 | タイプ | 説明 |
---|---|---|
format | string | テーブルの形式、つまり |
ID、 | string | テーブルの一意の ID。 |
name | string | メタストアで定義されているテーブルの名前。 |
description | string | テーブルの説明。 |
location | string | テーブルの場所。 |
createdAt | タイムスタンプ | テーブルが作成された日時。 |
lastModified | タイムスタンプ | テーブルが最後に変更された日時。 |
partitionColumns | 文字列の配列 | テーブルがパーティション化されている場合は、パーティション列の名前。 |
numFiles | ロング | テーブルの最新バージョンにあるファイルの数。 |
sizeInBytes | int | テーブルの最新のスナップショットのサイズ (バイト単位)。 |
properties | 文字列-文字列マップ | このテーブルに設定されているすべてのプロパティ。 |
minReaderVersion | int | テーブルを読み取ることができるリーダーの最小バージョン (ログ プロトコルによる)。 |
minWriterVersion | int | テーブルに書き込むことができるライターの最小バージョン (ログ・プロトコルによる)。 |
statistics | 文字列キーを使用したマップ | 追加のテーブル・レベルの統計。 |
tableFeatures | 文字列の配列 | テーブルでサポートされているテーブル機能の一覧。 「Databricks で Delta Lake 機能の互換性を管理する方法」を参照してください。 |
clusteringColumns | 文字列の配列 | リキッドクラスタリングに使用されているカラム。 「Deltaテーブルにリキッドクラスタリングを使用する」を参照してください |
出力の例を次に示します。
+------+--------------------+------------------+-----------+--------------------+--------------------+-------------------+----------------+--------+-----------+----------+----------------+----------------+
|format| id| name|description| location| createdAt| lastModified|partitionColumns|numFiles|sizeInBytes|properties|minReaderVersion|minWriterVersion|
+------+--------------------+------------------+-----------+--------------------+--------------------+-------------------+----------------+--------+-----------+----------+----------------+----------------+
| delta|d31f82d2-a69f-42e...|default.deltatable| null|file:/Users/tuor/...|2020-06-05 12:20:...|2020-06-05 12:20:20| []| 10| 12345| []| 1| 2|
+------+--------------------+------------------+-----------+--------------------+--------------------+-------------------+----------------+--------+-----------+----------+----------------+----------------+