Databricks Marketplaceとは?
この記事では、データ製品を取引するためのオープンフォーラムであるDatabricks Marketplaceについて説明します。Databricks Marketplaceでは、Delta Sharingを活用することで、データプロバイダーには、データ製品を安全に共有するためのツールを、データコンシューマーには、必要なデータやデータサービスを探したり、利用したりするための機会を提供します。
コンシューマーはどのようにしてDatabricks Marketplaceのデータにアクセスするのですか?
Databricks Marketplace で必要なデータ製品を見つけるには、プロバイダーの一覧を参照または検索するだけです。
コンシューマーは以下を利用できます。
オープンマーケットプレイス(Databricksワークスペースへのアクセス権は不要)。
お使いのDatabricksワークスペースのDatabricks Marketplace。 Marketplaceをクリックするだけです。
Marketplace のデータ製品へのアクセスをリクエストするには、Databricks ワークスペースで Marketplace を使用する必要があります。 データの共有設定を行った後は、データにアクセスして操作するために Databricks ワークスペースは必要ありませんが、Unity Catalogが有効化されたDatabricks ワークスペースを使用すると、Unity Catalog と Delta Sharing のインテグレーションを活用できます。
データ製品には、 パブリックなMarketplaceですべてのユーザーが利用できるものもあれば、プロバイダーが特定のメンバーのコンシューマーのみとリスティングを共有する プライベートエクスチェンジの一部として利用できるものもあります。 パブリックかプライベートかにかかわらず、一部のデータ製品は、リクエストして条件に同意するとすぐに利用できます。 また、プロバイダーの承認と、プロバイダー・インターフェースを使用したトランザクションの完了を必要とする場合もあります。 いずれの場合も、Marketplace を強化する Delta Sharing プロトコルにより、共有データに安全にアクセスできます。
データ製品へのアクセスを開始する
データ コンシューマーとして開始する方法を学習するには、次のようにします。
が有効になっているDatabricks ワークスペースを使用する場合は、Unity Catalog 「 のデータにアクセスする (Databricks MarketplaceUnity Catalog が有効になっているワークスペース)」 を参照してください。
、 、 などのサードパーティPower BI PandasApache Sparkプラットフォームと、 で有効になっていないDatabricks ワークスペースを使用する場合は、 「外部プラットフォームを使用してUnity Catalog でデータにアクセスする」Databricks Marketplace を参照してください。
プロバイダーはどのようにしてDatabricks Marketplaceにデータ製品をリストするのですか?
Databricks Marketplaceは、データプロバイダーに、データ製品を共有するための安全なプラットフォームを提供します。これにより、データサイエンティストやアナリストは自社の成功に必要なデータ製品を利用できるようになります。Databricks MarketplaceではDelta Sharingを使用して、共有データの安全性と制御性を提供しています。ここでは公開データ、無料のサンプルデータ、商用のデータを共有できます。データ製品はパブリックリスティングで共有することも、プライベート取引所を作ってそこで共有し、メンバーコンシューマーだけがそのデータ製品を見つけられるようにすることもできます。データセットに加え、Databricksのノートブックやその他のコンテンツを共有して、ユースケースを示したり、データ製品を最大限に活用する方法を提示したりすることもできます。
データ製品のリスティングを開始する
Databricks Marketplaceにデータ製品を出品するための要件は次の通りです。
Databricks アカウントと、Unity Catalog が有効になっている Premium ワークスペースがあること。 すべてのワークスペースで Unity Catalog を有効にする必要はありません。 Marketplace の登録情報を管理するためにワークスペースを作成できます。
Databricksパートナー プログラムを通じてプロバイダーになるために申請します。 あるいは、プライベート交換を通じてのみデータを共有したい場合は、プロバイダー コンソールのセルフサービス サインアップ フローを使用できます。 「 Databricks Marketplace プロバイダーになるためにサインアップする」を参照してください。
Marketplaceのプロバイダーポリシーを確認すること。
具体的な開始方法については、「Databricks Marketplaceにデータ製品を出品する」を参照してください。