Databricksにおけるデータウェアハウス

データウェアハウジング on Databricks クラウドデータウェアハウジング機能とレイクハウスアーキテクチャを組み合わせたものです。 Databricks SQL は、高性能でコスト効率の高いデータウェアハウスを構築するためのツールとサービスを提供します。

Databricks SQLの使い方

SQLウェアハウス上のDatabricks SQL実行は、 Delta Lake拡張機能を備えたANSI SQLをサポートしています。クエリ、視覚化、自動化のために、複数のインターフェースから Databricks SQL にアクセスできます。

インタフェース	説明
クエリエディター	統合されたDatabricks Assistant 、コードコメント、バージョン履歴を使用してSQLクエリを記述および実行し、共同でクエリを開発します。
ノートブック	ノートブックをSQLウェアハウスに接続して、 Python 、 Scala 、または R と並行してSQL実行します。制限については、ノートブックとSQLウェアハウスを参照してください。
ジョブ	自動化されたデータ処理およびレポートワークフローのジョブとして SQL クエリをスケジュールします。
ダッシュボード	AI支援オーサリングを使用してインタラクティブなAI/BIダッシュボードを作成し、組織全体で知見を共有します。
メトリクスビュー	セマンティックレイヤーを使用した一貫した計算でビジネスメトリクスを定義します。クエリとダッシュボード全体でメトリクスを再利用します。
アラート	自動クエリ実行をスケジュールし、カスタム条件を評価し、アラート履歴追跡を使用して通知を配信します。
クエリパフォーマンスモニタリング	クエリのパフォーマンスを確認し、ボトルネックを特定し、最適化の機会を見つけます。
REST API	REST API を使用して、Databricks SQL オブジェクトのタスクをプログラムで自動化します。

Databricks SQL の使用の詳細については、以下を参照してください。

Databricks SQL を初めてご利用ですか? 基本的な概念を理解した上で、実践的なチュートリアルで学んだことを応用しましょう。

リソース	説明
データウェアハウスのアーキテクチャ	レイクハウスのアーキテクチャ、メダリオンレイヤー、データウェアハウスを構築するためのデータモデリングアプローチを理解します。
Databricks SQLの概念	クエリ、 SQLウェアハウス、ダッシュボード、データ管理など、 Databricks SQL核となる概念を学びます。
Databricks SQLを使用してデータウェアハウジングを開始する	サンプルダッシュボード、ノートブック、ジョブ、データ取り込み、 SQLウェアハウスのセットアップをカバーする完全なチュートリアルに従ってください。
AI/BI dashboardを作成する	AI 支援によるオーサリングを使用して、データセット、視覚化、フィルターを備えた最初のダッシュボードを構築して公開します。
Unity Catalogメトリクスビュー	クエリとダッシュボード全体で使用できるセマンティックレイヤーを使用して、一貫性があり再利用可能なビジネスメトリクスを定義します。