DESCRIBE DETAIL を使って Delta Lake テーブルの詳細を確認する

Delta テーブルに関する詳細情報 (ファイル数、データ サイズなど) を取得するには、 DESCRIBE DETAILを使用します。

DESCRIBE DETAIL '/data/events/'

DESCRIBE DETAIL eventsTable

Spark SQL 構文の詳細については、「 詳細の説明」を参照してください。

Scala/Java/Python 構文の詳細については、 Delta Lake API のドキュメント を参照してください。

詳細スキーマ

この操作の出力には、次のスキーマを持つ行が 1 つだけあります。

注:

表示される列は、使用しているDatabricks Runtimeバージョンと有効にしたテーブル機能によって異なります。

タイプ

説明

format

文字列

テーブルの形式、つまり delta.

id

文字列

テーブルの一意の ID。

name

文字列

メタストアで定義されているテーブルの名前。

description

文字列

テーブルの説明。

location

文字列

テーブルの場所。

createdAt

タイムスタンプ

テーブルが作成された日時。

lastModified

タイムスタンプ

テーブルが最後に変更された日時。

partitionColumns

文字列の配列

テーブルがパーティション分割されている場合のパーティション列の名前。

numFiles

ロング

最新バージョンのテーブル内のファイルの数。

sizeInBytes

整数

テーブルの最新のスナップショットのサイズ (バイト単位)。

properties

文字列と文字列のマップ

このテーブルに設定されたすべてのプロパティ。

minReaderVersion

整数

テーブルを読み取ることができるリーダーの最小バージョン (ログ プロトコルによる)。

minWriterVersion

整数

テーブルに書き込むことができるライターの最小バージョン (ログ プロトコルによる)。

statistics

文字列キーを使用したマップ

追加のテーブルレベルの統計。

tableFeatures

文字列の配列

テーブルでサポートされているテーブル機能の一覧。 「Databricks は Delta Lake 機能の互換性をどのように管理しますか?」を参照してください。 。

clusteringColumns

文字列の配列

リキッドクラスタリングに使用されているカラム。 「 Deltaテーブルにリキッドクラスタリングを使用する」を参照してください。

出力の例を次に示します。

+------+--------------------+------------------+-----------+--------------------+--------------------+-------------------+----------------+--------+-----------+----------+----------------+----------------+
|format|                  id|              name|description|            location|           createdAt|       lastModified|partitionColumns|numFiles|sizeInBytes|properties|minReaderVersion|minWriterVersion|
+------+--------------------+------------------+-----------+--------------------+--------------------+-------------------+----------------+--------+-----------+----------+----------------+----------------+
| delta|d31f82d2-a69f-42e...|default.deltatable|       null|file:/Users/tuor/...|2020-06-05 12:20:...|2020-06-05 12:20:20|              []|      10|      12345|        []|               1|               2|
+------+--------------------+------------------+-----------+--------------------+--------------------+-------------------+----------------+--------+-----------+----------+----------------+----------------+