長期記憶:評価、コスト、および操作
長期記憶の評価ケース、品質指標、レイテンシーおよびコスト制限、監視、フォールバック、インシデント対応を扱います。採用の境界と観測可能な障害証拠を固定しつつ、環境固有の制限は設定可能に保ちます。
パッケージの状態: 参照コンテキストは人間によるレビュー準備完了。契約およびテストシナリオは完成していますが、採用実装がこれらを通過したという主張はしていません。
決定
長期記憶については、バージョン管理されたオーケストレーションポリシーと明示的なモデル呼び出し境界を採用します。このブロックは代表的な肯定、境界、拒否、失敗、回復ケースから構築されたリリースおよび回帰契約として扱います。このパッケージは参照契約であり、採用チームは自環境の証拠から数値制限、プロバイダー、法域、運用責任者を選択しなければなりません。
範囲
- 長期記憶のアクター、入力、出力、状態、ポリシーまたはスキーマのバージョン、およびこのテストブロックで記述された外部に見える結果。
- 主要および代替インターフェース、バックグラウンド作業、キャッシュ、統合、サポートパス、および同じ境界を検証できる証拠。
- 参照を安全に適用するために必要な採用固有の設定、展開、回復、および検証の責任。
このブロックの外
- すべての採用者に対して普遍的なベンダー、フレームワーク、法域、数値閾値、保持期間、またはサービスレベル目標を選択すること。
- パッケージ化されたシナリオが下流の実装で実行されたことや、この参照が法的、セキュリティ、アクセシビリティ認証を付与することを主張すること。
契約
- 各重要な結果を再現または説明するために必要なプロンプト、ツール、検索、モデル、ポリシーのバージョンを永続化する。
- 副作用の前に構造化された出力を検証する。形式不正または不完全な出力はエラーであり、部分的な権限ではない。
- 信頼できないユーザーまたは取得コンテンツをシステムポリシーから分離し、各コンテキスト項目に起源と信頼クラスをラベル付けする。
- トークン数、ツール呼び出し、レイテンシー、支出をリクエストごとに制限し、制限を超えた場合は名前付きフォールバックを実行し、無制限に続行しない。
- 決定を伴うすべての実行について、フィクスチャのバージョン、環境、設定、観測結果、および証拠の場所を記録する。
- 製品障害、依存障害、テストインフラ障害、結論不能な証拠をレポートで区別する。
- ユーザーが許可した耐久的な事実のみを、ソース、対象、目的、信頼度、可視性、作成およびレビュー時間、有効期限、ポリシーバージョンとともに保存する。
- ユーザーが記憶を検査、修正、忘却、制限し、現在のタスクに再認可し、要約や推論された特性が黙示的な永続的真実になるのを防ぐ。
実装ガイダンス
- リスククラスを網羅する最小の決定的フィクスチャセットを構築し、プライバシー安全なレビュー後に本番由来のケースを追加する。
- フレームワークやベンダーの詳細を選択する前に、長期記憶の入力、出力、アクター、状態、不変条件、副作用、証拠をモデル化する。
- 適用される長期記憶契約またはポリシーバージョンを重要な状態とともに保存し、マイグレーション、リプレイ、サポートの判断が帰属可能であるようにする。
- 制御された展開の背後にパスを導入し、期待結果と観測結果を比較し、採用証拠が完了するまでテスト済みの回復ルートを維持する。
障害対応と安全策
- プロバイダー障害、安全でない出力、または予算枯渇時は制限されたフォールバックを返し、相関安全な診断証拠を保持する。
- 無効または矛盾する長期記憶状態は拒否または隔離し、実装は権限を拡大したり効果を重複させる値を推測しない。
- リトライは制限され耐久的な識別子を使用し、枯渇後は検査可能な終端状態に達し、責任ある所有者が存在する。
検証と運用
- クリーンな状態からスイートを2回実行し、順序、リトライ、並列実行が判定を変えないことを確認する。
- 長期記憶の成功、拒否、検証失敗、依存障害、リトライ枯渇、回復を契約バージョン別に監視し、機密ペイロードの詳細は含めない。
- ポリシー、スキーマ、依存関係、マイグレーション、境界の変更後に肯定・否定のペアフィクスチャを再実行し、得られた証拠を保存する。
採用の前提
- 例の名前と値は具体的なフィクスチャであり普遍的なデフォルトではない。採用者は文書化された証拠と所有権を通じて置き換える。
- 採用システムは認証済みの識別、耐久的な操作または記録バージョン、制限されたテレメトリ、および制御された変更パスを提供できる。
このパッケージの実行可能に見える例はフィクスチャおよび受け入れ契約です。構造とメタデータを検証するためにコレクションバリデーターを実行し、対象リポジトリでシナリオを翻訳および実行してから実装証拠を記録してください。
参考文献
- NIST AI 600-1, Generative AI Profile(2026-09-08適用)