Retrieval-augmented generation (RAG) の基礎

このセクションでは、非構造化データに対するRAGアプリケーションの開発の背後にある主要なコンポーネントと原則を紹介します。

特に、以下の点に注意してください。

データパイプライン: PDFのコレクションなどの非構造化ドキュメントを、RAGアプリケーションのデータパイプラインを使用して取得に適した形式に変換します。
Retrieval, Augmentation, and Generation (RAG chain): 一連のステップ(またはチェーン)は、以下の目的で呼び出されます。
- ユーザーの質問を理解します。
- サポートデータを取得します。
- LLM を呼び出して、ユーザーの質問とサポートデータに基づいて応答を生成します。
評価:RAGアプリケーションを評価して、その品質、コスト、および遅延を判断し、ビジネス要件を満たしていることを確認します。
ガバナンスとLLMOps:データリネージやガバナンス(アクセス制御)など、各コンポーネントのライフサイクルを追跡および管理します。