用語集：RAG、リトリーバル、文書チェーン
この用語群は、取得されたコーパスがどのようにして回答の素材となるかを説明する用語をまとめたものである。RAGを技術的な近道としては扱わない。リトリーバルを、受け入れ、来歴、権威、証拠、修正に関わるガバナンス下の問題として扱う。
中心となる区別は単純である。システムは、適切に見えるパッセージを取得しながら、それでも正当でない回答を生成することがある。したがって、リトリーバルは、ソース階層、応答条件、忠実性の証明、文書チェーンと合わせて読まなければならない。
正規の用語
- RAGガバナンスは、ソースへのアクセスが解釈権威に暗黙的に取って代わることのないよう、検索拡張システムを統御する。
- リトリーバル制御は、何が回答の構築プロセスに入ってよいか、そしてそれがどれだけの重みを持ちうるかを決定する。
- 文書チェーンは、カノン、リトリーバル、来歴、証拠、バージョン管理、回答の構築を結びつける。
- ソースの受け入れは、どのソースが適格とされ、格下げされ、制限され、または除外されるかを決定する。
- コーパスの適格性は、あるコーパスまたはコーパスの一部を、特定の解釈タスクに用いてよいかどうかを定義する。
- リトリーバル来歴は、何が、どのバージョンで、どのような条件のもとで取得され、それが回答にどのように影響したかを記録する。
- チャンクの権威は、取得された断片が何を裏づけうるかを制限する。
- 応答ウェブは、ページが回答、引用、推奨、行動を伴う出力へと再構成されるウェブのレイヤーを指す。
- 修正予算は、修正された解釈を優勢にするために必要な労力を見積もる。
- 解消は、古い解釈、残存する解釈、または歪んだ解釈が段階的に無力化されることを記述する。
運用シーケンス
- リトリーバルの前にソースを受け入れる。
- リトリーバルとランキングを制御する。
- 来歴とチャンクの境界を保持する。
- 文書チェーンを構築する。
- 回答の正当性と忠実性の証明を検証する。
- 修正が古い解釈を解消しているかどうかを観察する。
このシーケンスは、最も一般的なRAGの失敗、すなわちソースへのアクセスを回答の正当性と取り違えることを防ぐ。
関連ページ
フェーズ9のルーティングレイヤー：メモリ、持続性、残留、修正
このページは現在、状態を伴う解釈に関する問いを、フェーズ9の正規レイヤーへと振り分けている。対象は、メモリガバナンス、エージェントメモリ、メモリオブジェクト、持続的前提、制御された忘却、古い状態の処理、存続する権威、解釈残留、解釈慣性、バージョン支配力、状態乖離、修正の解消である。
ルーティングのルールは明快である。持続性だけを根拠に現在の権威を推論してはならない。メモリオブジェクト、古い引用、存続しているソース、取得された断片、以前の回答は、新たな回答や行動を統御する前に、鮮度、権威、トレーサビリティ、修正の解消のチェックを通過しなければならない。
フェーズ10のルーティングレイヤー：推論、裁定、不確定性、忠実性
このページは現在、推論制御に関する問いを、フェーズ10の正規レイヤーへと振り分けている。対象は、解釈エラー空間、自由推論、デフォルト推論、裁定、不確定性、解釈忠実性である。
ルーティングのルールは明快である。もっともらしい補完を正当な解釈として扱ってはならない。回答は、主張、推奨、行動を統御しうる前に、不確定性を明示し、許可されていない推論を阻止し、衝突を裁定し、忠実性を保たなければならない。
この用語群の読み方
この用語群は、回答に先立つ文書の経路を統御する。RAGが有用かどうかを問うのではない。適切な素材が、回答に影響を与える前に、受け入れられ、取得され、文脈化され、帰属され、境界づけられたかどうかを問う。
リトリーバル制御は、何が回答プロセスに入ってよいかを決定する。ソースの受け入れは、どの文書がコーパスに属するかを決定する。コーパスの適格性は、あるソースが特定の用途に適しているかどうかを評価する。リトリーバル来歴は、素材がどこから来たのかを保持する。チャンクの権威は、断片がそれを統御する文書よりも強いものとして扱われることを防ぐ。
典型的な誤読
中心的な誤りは、リトリーバルが正当性に等しいと述べることである。文書は取得されたとしても、陳腐化している、派生的である、範囲外である、正規ではない、あるいは求められた回答にとって適格でないことがある。RAGはアクセスを改善しながら、正当でない合成を生み出すこともある。
もう一つの誤りは、チャンクを独立した権威として扱うことである。チャンクは正しい語句を含んでいても、周囲の文書から切り離されると、その条件、限界、日付、範囲、否定を失うことがある。
監査とルーティングでの活用
システムが文書に根拠づけられていると主張する場合には、この用語群を用いる。監査は、受け入れ、リトリーバル、チャンクの選択、ソース階層、バージョン管理、来歴、推論、応答条件をたどらなければならない。
ルーティングにおいては、この用語群は、RAGガバナンス、文書アーキテクチャ、ソース階層、回答の正当性、忠実性の証明に関するページを支える。これは、コーパスエンジニアリングと解釈ガバナンスとのあいだの橋である。