Allowlist ライブラリ and initscript on shared コンピュート

Databricks Runtime 13.3 LTS 以降では、Unity Catalog の allowlist にライブラリと initスクリプトを追加できます。これにより、ユーザーは共有アクセスモードで構成されたコンピュートでこれらの成果物を活用できます。

ディレクトリまたはファイルパスは、そのディレクトリまたはファイルが存在する前に許可リストに登録できます。「Unity Catalog ボリュームへのファイルのアップロード」を参照してください。

注

許可リストを変更するには、メタストア管理者であるか、 MANAGE ALLOWLIST 特権を持っている必要があります。「MANAGE ALLOWLIST」を参照してください。

重要

Unity Catalog対応の共有コンピュートで JDBC ドライバーまたはカスタム Spark データソースとして使用されるライブラリには、 ANY FILE権限が必要です。

インストールされているライブラリの中には、すべてのユーザーのデータを 1 つの共通の一時ディレクトリに保存するものもあります。これらのライブラリはユーザーの分離を危険にさらす可能性があります。

許可リストに項目を追加する方法

アイテムを allowlist に追加するには、「カタログエクスプローラ」(Catalog Explorer ) または REST API を使用します。

カタログエクスプローラーで許可リストにアイテムを追加するためのダイアログを開くには、次の手順を実行します。

Databricks ワークスペースで、[ カタログ] をクリックします。
クリックすると、メタストアの詳細とアクセス許可の UI が開きます。
[許可された JAR/initスクリプト] を選択します。
[追加] をクリックします。

重要

このオプションは、十分な特権を持つユーザーに対してのみ表示されます。許可リスト UI にアクセスできない場合は、メタストア管理者に問い合わせて、ライブラリと initScript の許可リストに登録してください。

initスクリプトを許可リストに追加する

許可リストダイアログで次のステップを完了して、initスクリプトを許可リストに追加します。

[ タイプ] で [initスクリプト] を選択します。
「 ソース・タイプ」で、「 ボリューム 」またはオブジェクト・ストレージ・プロトコルを選択します。
許可リストに追加するソースパスを指定します。「許可リストでのパスのアクセス許可の適用方法」を参照してください。

許可リストに JAR を追加する

許可リスト・ダイアログで次のステップを実行して、JARを許可リストに追加します。

[タイプ] で [JAR] を選択します。
「 ソース・タイプ」で、「 ボリューム 」またはオブジェクト・ストレージ・プロトコルを選択します。
許可リストに追加するソースパスを指定します。「許可リストでのパスのアクセス許可の適用方法」を参照してください。

Maven 座標を許可リストに追加する

許可リストダイアログで次のステップを完了して、Maven 座標を許可リストに追加します。

[タイプ] で [Maven] を選択します。
[ ソースタイプ] で [ 座標] を選択します。
座標を次の形式で入力します: groudId:artifactId:version。
- ライブラリのすべてのバージョンを含めるには、次の形式を許可リストに登録します: groudId:artifactId。
- すべての成果物をグループに含めるには、次の形式で許可リストに登録します: groupId。

パスに対するアクセス許可は許可リストでどのように適用されますか?

許可リストを使用して、 Unity Catalog ボリュームおよびオブジェクトストレージに格納されているJARまたはinitScriptへのアクセス権を付与できます。ファイルではなくディレクトリのパスを追加すると、許可リストのアクセス許可は含まれているファイルとディレクトリに伝達されます。

プレフィックスマッチングはUnity Catalogボリュームまたはオブジェクトストレージに保存されるすべてのアーティファクトに使用されます。特定のディレクトリレベルでプレフィックスが一致しないようにするには、末尾にスラッシュ(/)を含めます。たとえば、 /Volumes/prod-libraries/ は、という接頭辞が付いたファイルに対して接頭辞の一致を実行し prod-libraries。代わりに、 /Volumes/prod-libraries/ 内のすべてのファイルとディレクトリが許可リストに追加されます。

アクセス許可は、次のレベルで定義できます。

ボリュームまたはストレージコンテナの基本パス。
基本パスから任意の深さにネストされたディレクトリ。
1 つのファイル。

許可リストにパスを追加するということは、そのパスを initScript または JAR インストールに使用できることを意味します。 Databricks は、指定された場所にあるデータにアクセスするためのアクセス許可を引き続きチェックします。

使用するプリンシパルには、指定したボリュームに対する READ VOLUME 権限が必要です。 SELECTを参照してください。

シングル・ユーザー・アクセス・モードでは、割り当てられたプリンシパルの ID (ユーザーまたはサービスプリンシパル) が使用されます。

共有アクセスモードまたは分離なしの共有アクセスモードでは、ライブラリインストーラーの ID が使用されます。

注

分離なしの共有アクセスモードはボリュームをサポートしませんが、共有アクセスモードと同じ ID 割り当てを使用します。

Databricks では、initScript とライブラリに関連するすべてのオブジェクトストレージ特権を読み取り専用アクセス許可で構成することをお勧めします。これらの場所に対する書き込みアクセス許可を持つユーザーは、ライブラリファイルまたは initScript 内のコードを変更する可能性があります。

Databricks では、Google クラウドサービスアカウントを使用して、GCS に格納されている JAR または initスクリプトへのアクセスを管理することを推奨しています。目的のバケットの Storage Object Viewer ロールを持つGoogleクラウドサービスアカウントを作成し、クラスターにアタッチします。クラスターで Google クラウドのサービスアカウントを使用して GCS バケットにアクセスするを参照してください。

注

JAR と initScript の許可リスト権限は別々に管理されます。同じ場所を使用して両方のタイプのオブジェクトを保存する場合は、それぞれの許可リストに場所を追加する必要があります。