メインコンテンツまでスキップ
に最終更新

Unity Catalog でのデータディスカバリー

データディスカバリーとは、組織全体のユーザーがカタログ内のデータアセットを見つけ、理解し、信頼できるようにする機能です。管理者として、有効にするブラウジングエクスペリエンス、適用するタグ付けメタデータと信頼シグナル、およびデータの意味を定義するセマンティックレイヤーを通じて、検出可能性を形成します。このページでは、Unity Catalogにおけるデータディスカバリー機能の概要と、それぞれの詳細ドキュメントへのリンクを提供します。

ディスカバーページ​

Discover ページは、ユーザーがドメインおよびサブドメイン別、またはアセット タイプ別に整理されたデータ資産を見つけ、AI が推奨するアセットを探索できる、厳選されたブラウジング エクスペリエンスです。キュレーターは組織にとって最も価値のある資産を整理して強調表示するため、コンシューマーはビジネスの理解に沿った方法でデータを閲覧できます。

ディスカバー ページを開くには、サイドバーでCompassアイコン。 ディスカバー をクリックします。

ディスカバーページでドメイン別に閲覧する

ディスカバー ページには、データの検索と整理のためのいくつかの機能が集約されています：

  • ドメインとサブドメイン : 関連するアセットをグループ化し、ユーザーがビジネスエリア別にデータを参照できるようにする、ビジネスに合わせた階層です。
  • ページ : ビジネスコンセプトと用語を定義する管理ページ。Genie Oneは、回答の根拠をビジネス用語に求める必要がある場合、これらのページを信頼できる唯一の情報源（ソース・オブ・トゥルース）の定義として参照します。
  • AIを活用したレコメンデーション : キュレーターが最適なデータを大規模に強調表示できるように、人気のある価値の高いアセットが自動的に表示されます。
  • カスタムキュレーション : ドメインまたは組織全体にとって最も価値のある資産を強調表示および整理する、キュレーター定義のセクション。

ディスカバー ページとその主な機能の詳細については、以下のページをご覧ください。

    • ディスカバーページ
    • ドメインまたはアセットタイプ別に厳選されたデータアセットを参照し、カタログ全体を検索します。
    • ドメインとサブドメイン
    • データアセットを、コンシューマーがディスカバーページで閲覧するビジネスに沿った階層に整理します。
    • ページ
    • ディスカバーページに表示される、ビジネスコンセプトを定義するページを作成および管理します。

キュレーターとコンシューマーのペルソナ​

ユーザーは、2つのペルソナのいずれかとして Discover ページを操作します：

  • キュレーター : ドメインを作成および管理し、ドメインにアセットを割り当て、 ディスカバー ページをカスタマイズし、組織内の他のユーザーがビジネス目的別にデータを参照できるようにします。ページの場合、キュレーターはドメイン内の任意のページを編集、公開、管理できます。これらのアクションにはMANAGE DISCOVERY権限が必要です。この権限は、アカウント管理者がアカウント、ドメイン、またはサブドメインレベルで付与できます。キュレーターの権限を参照してください。
  • コンシューマー : ディスカバー ページを使用して、ドメインまたはアセットタイプ別に整理された厳選されたアセットを見つけ、AIが推奨するアセットを調べます。ページについて、コンシューマーはページを作成および公開したり、アクセス可能なドメイン内の公開済みページを表示、コメント、および編集の提案を行ったりできます。コンシューマーのステップを参照してください。

カタログエクスプローラー​

ディスカバー ページがキュレーションされたデータのサブセットを表示するのに対し、カタログ エクスプローラは、ビジネスに合わせた階層ではなく、カタログ階層内のすべてのデータを表示します。これは、データオブジェクトを直接参照および検査するためのインターフェースであり、厳選されたビューでは表示されない詳細（オブジェクトのプロパティ、権限、サンプルデータ、リネージなど）も含まれます。組織が推奨するアセットが必要な場合はユーザーを ディスカバー ページへ、全体像の把握や特定のオブジェクトの検査および構成が必要な場合はCatalog Explorerへ誘導します。

データアイコン。カタログエクスプローラーを開くには、サイドバーの カタログ をクリックします。

カタログツリーと提案を含むオブジェクトのリストを表示する、カタログ エクスプローラーのインターフェイス

Unity Catalogのセマンティクス​

Unity Catalog セマンティクスは、カタログデータ上で標準的なビジネスメトリクス、用語、組織構造を定義するのに役立つツールのコレクションです。これは、組織とその AI ツールが、データの意味に関する単一の共有解釈に基づいて作業するのに役立ちます。Unity Catalog セマンティクスは、次のコンポーネントで構成されています。

  • メトリクスビュー は、再利用可能なビジネスKPIを定義および管理します。
  • ドメインとサブドメイン は、 ディスカバー ページで参照するために、ビジネスに合わせた階層にアセットを整理します。
  • ページ は、各ビジネスコンセプトと用語に信頼できる定義を提供します。
  • 認定と非推奨 は、組織が審査したアセットと、古いアセットにフラグを立てます。

これらの定義は、Genie Ontologyの人間がモデル化したレイヤーを構成します。これは、ユーザーが明示的に定義および管理するビジネスコンテキストです。Genie Oneは、このモデル化されたコンテキストと、アセットや使用状況から自動的に推論されたコンテキストを組み合わせ、質問に回答するために利用される統合コンテキストレイヤーを形成します。

Unity Catalogのセマンティクスとそのコンポーネントの詳細については、次のページを参照してください。

タグ​

タグは、Unity Catalog のセキュリティ保護可能なオブジェクトに適用して整理および分類するための属性であり、これによりデータの検索とフィルタリングが容易になります。管理タグを使用すると、管理者は特定のタグキーを管理対象としてマークし、それぞれに許可される値のセットを定義できます。

たとえば、管理タグ sensitivity では public、internal、または restricted のみが許可される場合があり、これによりカタログ全体で同じタグが同じ方法で適用されます。

オブジェクトに管理タグを割り当てる

リネージ​

リネージは、テーブル、カラム、AI アセット間でデータがどのように流れるかを追跡するため、ユーザーはデータを信頼する前に、そのデータの出所と使用方法をトレースできます。Unity Catalog は、Databricks 上で実行されるクエリーのリネージを自動的にキャプチャし、カタログ エクスプローラに表示します。

Catalog Explorerのリネージグラフ

    • Unity Catalogにおけるリネージ
    • テーブル、列、ノートブック、およびその他のアセット間でデータがどのように流れるかをキャプチャして表示します。
    • 外部リネージ
    • Databricksと外部システム間を移動するデータのリネージを追跡します。

認定と非推奨​

データアセットを認定して組織の基準を満たしていることを示したり、非推奨にして古いデータであり使用すべきではないことを警告したりできます。これらのシグナルはワークスペース内のアセットの横に表示され、検索での表示方法に影響を与えるため、ユーザーはアセットを使用する前に信頼できるかどうかを判断できます。

例えば、データアセットの横にある青いチェックマークは、それが認定済みであることを示します。

オブジェクトの認定ステータス

このページの見出し