Delta Live Tablesパイプラインのモニタリングと観測オプション

この記事では、パイプラインのモニタリング、報告、監査、パイプラインイベントのアラートと通知の生成をサポートするDelta Live Tablesに含まれる機能を紹介します。

Delta Live Tablesには、パイプラインのモニタリングと観測をサポートするいくつかの機能が含まれています。これらの機能は、次のようなタスクをサポートします。

• パイプラインの更新の進捗状況とステータスの監視

• パイプライン更新の成功や失敗など、パイプラインイベントのアラート

• データリネージ、データ品質指標、リソース使用量など、パイプラインの更新に関する詳細情報の抽出

• 特定のイベントが発生したときに実行するカスタムアクションの定義

このセクションの記事は、これらの機能を効果的に使用してDelta Live Tablesパイプラインをモニタリングするのに役立つ詳細なリファレンスです。

Delta Live Tables UIとログを使用してパイプラインを監視する

パイプラインの詳細UIを使用して、パイプラインの更新のステータスや進行状況、更新の履歴、パイプライン内のデータセットの詳細を表示できます。より高度なレポートや監査タスクには、Delta Live Tablesイベントログを使用することができます。

「Delta Live Tablesパイプラインのモニタリング」を参照してください。

イベントフックを使用して Delta Live Tables パイプラインのカスタム監視を実装する (パブリックプレビュー)

イベントフックを使用して、パイプラインのカスタムモニタリングとアラートを実装できます。例えば、イベントフックを使用して、特定のイベントが発生したときにEメールを送信したり、ログに書き込んだり、サードパーティのソリューションと統合したりすることができます。イベントフックは、イベントがDelta Live Tablesパイプラインのイベントログに永続化されたときに実行されるカスタムPythonコールバック関数です。

イベントフックを使用したDelta Live Tablesパイプラインのカスタムモニタリングの定義を参照してください。