DESCRIBE DETAIL を使って Delta Lake テーブルの詳細を確認する
Delta テーブルに関する詳細情報 (ファイル数、データ サイズなど) を取得するには、 DESCRIBE DETAIL
を使用します。
DESCRIBE DETAIL '/data/events/'
DESCRIBE DETAIL eventsTable
Spark SQL 構文の詳細については、「 詳細の説明」を参照してください。
Scala/Java/Python 構文の詳細については、 Delta Lake API のドキュメント を参照してください。
詳細スキーマ
この操作の出力には、次のスキーマを持つ行が 1 つだけあります。
注:
表示される列は、使用しているDatabricks Runtimeバージョンと有効にしたテーブル機能によって異なります。
列 |
タイプ |
説明 |
---|---|---|
format |
文字列 |
テーブルの形式、つまり |
id |
文字列 |
テーブルの一意の ID。 |
name |
文字列 |
メタストアで定義されているテーブルの名前。 |
description |
文字列 |
テーブルの説明。 |
location |
文字列 |
テーブルの場所。 |
createdAt |
タイムスタンプ |
テーブルが作成された日時。 |
lastModified |
タイムスタンプ |
テーブルが最後に変更された日時。 |
partitionColumns |
文字列の配列 |
テーブルがパーティション分割されている場合のパーティション列の名前。 |
numFiles |
ロング |
最新バージョンのテーブル内のファイルの数。 |
sizeInBytes |
整数 |
テーブルの最新のスナップショットのサイズ (バイト単位)。 |
properties |
文字列と文字列のマップ |
このテーブルに設定されたすべてのプロパティ。 |
minReaderVersion |
整数 |
テーブルを読み取ることができるリーダーの最小バージョン (ログ プロトコルによる)。 |
minWriterVersion |
整数 |
テーブルに書き込むことができるライターの最小バージョン (ログ プロトコルによる)。 |
statistics |
文字列キーを使用したマップ |
追加のテーブルレベルの統計。 |
tableFeatures |
文字列の配列 |
テーブルでサポートされているテーブル機能の一覧。 「Databricks は Delta Lake 機能の互換性をどのように管理しますか?」を参照してください。 。 |
clusteringColumns |
文字列の配列 |
リキッドクラスタリングに使用されているカラム。 「 Deltaテーブルにリキッドクラスタリングを使用する」を参照してください。 |
出力の例を次に示します。
+------+--------------------+------------------+-----------+--------------------+--------------------+-------------------+----------------+--------+-----------+----------+----------------+----------------+
|format| id| name|description| location| createdAt| lastModified|partitionColumns|numFiles|sizeInBytes|properties|minReaderVersion|minWriterVersion|
+------+--------------------+------------------+-----------+--------------------+--------------------+-------------------+----------------+--------+-----------+----------+----------------+----------------+
| delta|d31f82d2-a69f-42e...|default.deltatable| null|file:/Users/tuor/...|2020-06-05 12:20:...|2020-06-05 12:20:20| []| 10| 12345| []| 1| 2|
+------+--------------------+------------------+-----------+--------------------+--------------------+-------------------+----------------+--------+-----------+----------+----------------+----------------+