解釈完全性監査
正規の定義。本ページは、解釈ガバナンスのドクトリンの枠組みにおいて、解釈完全性監査(interpretation integrity audit)という用語の運用上の意味を定める。本ページは、運用上の詳細(重み付け、内部の閾値、アノテーションの手順、実行テンプレート)を開示することなく、その対象、ペリメーター、限界を記述する。
解釈完全性監査とは、次のもののあいだのギャップを特徴づける対抗可能な報告書を生み出す正式な手続きを指す。(1)明示的なペリメーターのなかで凍結された正規コーパス(スナップショット)、(2)宣言された条件のもとで生成された出力、(3)各所見を検証可能なアーティファクトに結びつける追跡可能な証拠の連鎖。
識別子と同義語
- 用語:解釈完全性監査
- 代替用語:解釈監査(一般的な用法。対象が完全性である場合は避ける)
- 英語:Interpretation integrity audit
- 測定対象:解釈の完全性(アンカリング、歪み、安定性、追跡可能性)
対象
解釈完全性監査は、次のものを検証可能にすることを目的とする:
- 所与のコーパスについて、システムが生成した断定
- それらの断定のステータス(根拠づけられている、推論されている、矛盾している、確定していない)
- 各所見を裏づける対抗可能な証拠の有無
- 出力が得られた条件(入力、ペリメーター、宣言されたパラメーター)
決定的な分離点:測定(またはスコア)は監査ではない。監査は、構造化されたアーティファクトと証拠の連鎖を生み出す。測定は、そのアーティファクトから派生した射影である。
基本単位
解釈完全性監査は、スナップショットに結びついている。基本単位は、次のものによって定義されるスナップショット化されたコーパスである:
- 明示的なペリメーター(ドメイン、サブディレクトリ、URLの一覧)
- タイムスタンプ
- 暗号学的フィンガープリント(たとえばSHA-256)
- 構築方法(クロール、エクスポート、列挙されたコーパス)
所見は、宣言されたペリメーターの外では有効ではない。異なるコーパスで観察された乖離は、監査の連続性を構成しない。
出力アーティファクト
監査は、少なくとも次のものを含む構造化された報告書(機械で検証可能)を生成する:
- 監査のメタデータ(識別子、日付、プロトコル、発行者)
- 監査単位(スナップショットとペリメーター)
- バージョン管理された質問セット(QuerySet)
- 実行(runs)と生の出力
- 類型化され、証拠に結びつけられた所見(evidence chain)
- 条件付き妥当性のステータス
正規の参照(プロトコル): 解釈完全性監査プロトコル(英語)。
条件付きの妥当性
解釈完全性監査の妥当性は条件付きであり、暦の上の期間で決まるものではない。監査は、重要な監査変数が変わらないかぎり有効であり続ける:
- スナップショットのフィンガープリント(ハッシュ)
- ペリメーター(boundary)
- 質問セット(QuerySet)のバージョン
- 宣言されたとおりのモデルの同一性
- 宣言されたとおりの実行パラメーター(または、明示的に不明とされたもの)
- 実行(runs)のタイムスタンプ
変数が一つでも変われば、監査は更新されなければならない。解釈の連続性を推定することはできない。
IIP-Scoring™との関係
IIP-Scoring™は、比較可能な指標(および、定義されている場合にはゲートとグレード)を生成するために、解釈完全性監査の結果に適用される射影関数である。スコアリングは要約するものであり、監査報告書に取って代わるものではない。
解釈の監査可能性との関係
解釈の監査可能性は特性である。それは、解釈を説明可能、検証可能、異議申立て可能にする最低限の条件を記述する。解釈完全性監査は、この特性を活用して対抗可能な報告書を生み出す手続きである。
派生的な手段との関係
テストバッテリー、チェックリスト、スクリプトなどの派生的な手段が、検証を実行し、または容易にするために存在しうる。派生的な手段は、監査を構成せず、ドクトリンを変更せず、いかなるアテステーションも生み出さない。
非目標
- 法的意見やコンプライアンス認証を構成するものではない
- ハルシネーションがないことを保証するものではない
- SEOのパフォーマンス、トラフィック、コンバージョンを測定するものではない
- 最適化のレシピ、アノテーションの手順、内部の閾値を提供するものではない
正規の参照
- 監査プロトコル(カノン):interpretive-governance.org/protocols/interpretation-integrity-audit/(英語)
- 定義のレジストリ:/ja/definitions/
関連項目
フェーズ3との隣接:証拠、監査可能性、測定
この定義は現在、フェーズ3の証拠に関わるレイヤーに属している。その役割は、四つの正規サーフェスによって明確化される。すなわち、証拠レイヤー、解釈の監査可能性、Q-Ledger、Q-Metricsである。
運用上の順序は次のとおりである。解釈証拠が、異議申立てを支えうるものを特定する。再構成可能な証拠が、第三者によるレビューのために事案をまとめる。解釈トレースが、経路を開示する。カノンと出力のギャップが、カノンからの距離を測定する。忠実性の証明が、出力が境界内にとどまったかどうかを検証する。そして解釈の可観測性が、時間の経過に伴う変動を追跡する。
このレイヤーにおいて、解釈完全性監査を、単なる証拠用語として読んではならない。この概念は、観察、測定、再構成可能性、監査可能性、証明を区別する連鎖に属する。