Databricks データエンジニアリング

Databricks データエンジニアリングの機能には、 data scientists、エンジニア、アナリスト間のコラボレーションのための堅牢な環境が含まれます。 データエンジニアリングタスクは、 Databricks Mosaic AI ソリューションのバックボーンでもあります。

注：

SQLクエリーやBIツールを主に使用するデータアナリストであれば、Databricks SQLの方を好むかもしれません。

データエンジニアリングのドキュメントには、Databricksの共同作業によるアナリティクス・プラットフォームを最大限に活用するための手引きが記載されています。チュートリアルや基本情報については、はじめに：アカウントとワークスペースの設定およびDatabricksとはを参照してください。

• Delta Live Tables

  Databricks Delta Live Tablesを用いて取り込みと変換のためのデータパイプラインを構築する方法を説明します。

• 構造化ストリーミング

  Databricks の構造化ストリーミングを利用したストリーミング、インクリメンタル、リアルタイムのワークロードについて説明します。