メインコンテンツまでスキップ
に最終更新

情報抽出

注記

このページでは、情報抽出の新しいバージョンについて説明します。以前のバージョンの詳細については、「情報抽出の使用（レガシー）」を参照してください。

情報抽出は、定義されたスキーマを使用して、非構造化ドキュメントとテキストを重要な構造化された知見に変換します。これにより、非構造化テキスト、PDF、画像、またはテーブルに埋め込まれた情報を、分析、レポート作成、またはダウンストリームのエージェントやアプリケーションに直接使用できます。

情報抽出の例は次のとおりです:

  • 契約から契約当事者と条件を抽出します。
  • 請求書から明細項目と支払い条件を抽出します。
  • 医療記録およびメモから主要な詳細を抽出します。

情報抽出は、AI 関数 ai_extract の上に構築されています。情報抽出には、定義された抽出スキーマで機能をカスタマイズおよび最適化するための視覚的な UI があります。

情報抽出は、各エージェントを動かす一時的なデータ変換、モデルチェックポイント、および内部メタデータを保存するために、デフォルトストレージを使用します。エージェントを削除すると、Databricks はエージェントに関連付けられているすべてのデータをデフォルトのストレージから削除します。

要件​

情報の抽出エージェントを作成​

ワークスペースの左側のナビゲーションペインで、エージェントアイコン エージェント に移動します。 Create Agent > 情報抽出 をクリックします。

ステップ1: 情報を抽出するデータを選択します。​

  1. **データから開始**ページで、情報を抽出したいファイルまたはデータを選択します。次のいずれかを実行できます。

    • 1つ以上のファイルをアップロードエリアにドラッグアンドドロップするか、クリックしてアップロードするファイルを参照します。
    • サポートされているファイルタイプを持つUnity Catalogボリュームを選択するには、**[ボリュームの選択]**をクリックしてください。
    • テーブルを選択 をクリックして、テキストデータを含む Unity Catalog のテーブルを選択してください。

  2. テーブルを選択した場合、抽出するデータを含む列を選択してください。続行するには、文字列またはVARIANTなどのサポートされている型の列を選択する必要があります。テーブルにサポートされている列がない場合、別のテーブルを選択してください。

  3. **エージェントの作成**をクリックします。このボタンは、有効なデータソースと、テーブルの場合はサポートされている列が選択された後にのみ有効になります。

ステップ2：抽出スキーマを構成して絞り込みます。​

情報抽出でデータが処理された後、ドキュメントから抽出するデータを構成し、調整します。

  1. 構成で、抽出スキーマを定義します。これを行うにはいくつかの方法があります：

    • 抽出したい情報を説明する自然言語を入力し、 スキーマの生成 をクリックしてください。情報抽出は、フィールド名と定義を含むJSONスキーマを自動的に生成します。必要に応じてこれらの説明を編集してください。

    • または、 Or, Define manually をクリックして、スキーマを手動で定義してください：

      1. [フィールドを追加] をクリックします。
      2. フィールド名、タイプ、説明を入力してください。
      3. 確認 をクリックします。
      4. 抽出したい各フィールドについて繰り返します。
      5. 「 抽出を保存して実行 」をクリックします。

    • JSON をクリックして、JSONスキーマを直接編集することもできます。完了したら、 変更を適用 をクリックしてください。

    スキーマを更新して [抽出を保存して実行] をクリックするたびに、情報抽出は抽出エージェントを更新し、抽出を実行して、各入力の結果を表示します。

  2. 左側で、解析されたドキュメントとエージェントの抽出を確認します。抽出結果を2つの方法で反復します。まず、 保存して抽出を実行 を押すと説明が自動調整される、1つまたは複数の入力について自然言語のフィードバックを提供します。次に、 保存して抽出を実行 を押すと適用されるスキーマの説明を手動で修正します。

  3. バージョンを使用して、以前の設定と比較または復元します。 [バージョン] をクリックし、次に [比較] をクリックして、以前のバージョンのスキーマ定義と現在のバージョンを比較します。以前のバージョンを復元するには、 [復元] をクリックします。

ステップ 3. 抽出エージェントを使用します。​

エージェントの性能に満足したら、エージェントを使用して情報を抽出してください。

右上の Use Agent をクリックします。次のいずれかを選択できます。

  • エージェントを使用してすべてのデータから情報を抽出するには、**SQL で実行**してください。これにより、定義されたスキーマに従い、ボリュームまたはテーブルから情報を抽出する ai_extract を使用した SQL クエリが開きます。SQLクエリでai_extractを使用する方法の情報の詳細については、ai_extract関数を参照してください。
  • Spark宣言型パイプラインを作成 して、スケジュールされた間隔で実行され、新しいデータでエージェントを呼び出すETLパイプラインをデプロイします。これにより、抽出されたデータでストリーミングテーブルを更新するLakeflow Spark宣言型パイプラインが作成されます。新しいデータが到着したときに実行するように、パイプラインのスケジュールを構成できます。LakeFlow Spark宣言型パイプラインの情報については、LakeFlow Spark宣言型パイプラインを参照してください。

制限事項​

  • 制限事項を参照してください。

  • 情報抽出エージェントの最大コンテキスト長は128kトークンです。

  • 共用スキーマタイプはサポートされていません。

このページの見出し