リトリーバル順位
リトリーバル順位(retrieval rank)とは、回答の構築過程において、あるソースまたはパッセージが受けているように見える相対的な優先度である。検索順位と関連はあるが、同じものではない。
あるページは、従来の検索で上位に表示されていても、AIを介した回答のためにリトリーバルされるソースの集合には入らないことがある。別のページは、目に見えるクエリでは順位が低くても、ファンアウトによる下位の問いに答えている、より明確なパッセージを含んでいる、あるいは想定される回答の形式によりよく合致しているという理由で選ばれることがある。
実践上の区別
検索順位が問うのは、あるページが検索結果のどこに表示されるかである。リトリーバル順位が問うのは、そのページやパッセージが、回答システムの用いる証拠集合に入る可能性が高いかどうかである。
この区別が重要なのは、引用準備度が、メインのキーワードだけでなくクエリのクラスター全体をカバーしなければならないからである。また、この区別は、ページをURL単位だけでなく、パッセージ単位でも評価することを求める。
ガバナンス上の含意
リトリーバル順位を、ソースの正当性として扱ってはならない。リトリーバルされたソースは、権威あるものでなくても有用でありうる。したがって監査は、リトリーバルの証拠をソース階層と引用忠実性に結びつけなければならない。