Skip to content

Evidence for AI operations

No English page yet. Showing the Japanese source.

Back to the entrance

Enterprise AI運用テンプレート集

用語・参照用語・参照公式仕様のみ公式仕様のみ鮮度未確認鮮度を確定できない

記事状態: 公開 · 最終確認: 未確認

要点

運用テンプレートはAI統制を自動的に成立させるものではなく、判断・証拠・変更・未解決事項を再現可能に残すための器である。共通Coreを用意しつつ、法域・業界・組織・providerに応じて項目をtailorする。PASS/完了の記入だけでなく、根拠となるsource、eval、承認、readbackを結び付ける。

現在の判断

運用テンプレートはAI統制を自動的に成立させるものではなく、判断・証拠・変更・未解決事項を再現可能に残すための器である。共通Coreを用意しつつ、法域・業界・組織・providerに応じて項目をtailorする。PASS/完了の記入だけでなく、根拠となるsource、eval、承認、readbackを結び付ける。

どこまで当てはまるか

Enterprise AI運用テンプレート集

詳しく理解する

10-artifact pack

A. AI_SYSTEM_CARD

system_id、owner、purpose、users、provider/model/tool/data、decision/action impact、deployment state、dependencies、approved use、prohibited use、review date。

B. CHANGE_CONTRACT

change_id、affected system/config/prompt/model/tool/data、reason、risk delta、required eval、approval、rollout/canary、rollback trigger、effective_at。

C. WORK_STATE

state_id、active scope、last valid run/change、current blockers、next bounded action、canonical artifact pointers。

D. RISK_AUDIT_REGISTER

finding_id、claim/control、evidence、severity/impact、owner、disposition、due/review date、residual risk、closure evidence。

E. QUESTION_QUEUE

question_id、decision unlocked、required evidence、excluded inference、owner、status、stop condition。

F. EVIDENCE_SOURCE_RECORD

source_id、origin class、title/org、canonical locator、accessed/as-of、version/revision、supporting locator、evidence label、claim relation。

G. EVAL_RECORD

eval_id、system/change under test、dataset/fixture version、metric/scorer/judge、threshold、result、slices、failure cases、acceptance decision。

H. INCIDENT_NEAR_MISS_RECORD

incident_id、detection、affected system/users/data/action、severity、containment、evidence preservation、root cause、recovery、corrective change、notification/escalation。

I. DEPLOYMENT_READINESS_CHECK

inventory/owner/data/identity/tool/action/eval/audit/incident/recovery/cost/availability gatesをPASS / FAIL / NA / UNKNOWNで記録し、evidence pointerを付ける。

J. DECOMMISSION_EXIT_RECORD

reason、dependency inventory、export/retention/deletion、credential revocation、replacement/fallback、evidence preservation、completion verification。

Common-ID linkage

共通キーは system_id / change_id / eval_id / finding_id / source_id / incident_id / run_or_trace_id とする。文書名や自由記述だけで関係を追わない。このID辞書はPROPOSALである。

Change / Audit / Question / Stateは分離する。変更要求、現在地、未解決問い、監査所見を一枚に混ぜて、履歴上の事実と将来作業を上書きしない。

Evidence boundary

NIST AI RMF PlaybookはGovern / Map / Measure / Manageのsuggested actionsを提供するvoluntary・tailorableなresourceであり、standardized documentation、AI system inventory、error/incident records、system change database、version history、monitoring/recovery/change management等を扱う。EA-029の固定10-artifact schemaそのものをNIST要件として扱わない。

NIST AI 600-1はcross-sector GenAI profileとしてcontextを与える。OWASP GenAI Incident Response GuideとThreat Defense COMPASSはincident responseやiterative threat prioritizationのpractitioner resourceとして扱う。OpenTelemetry Semantic Conventionsはtrace/metric/log/resource等の命名標準化に利用できるが、EA-029 governance template全体の標準ではない。

既存辞典で使うWork_STATE、Audit Register、Question Queue等はchat-primary/internal operating artifactsとして別originを保持し、外部標準由来へ再分類しない。

Machine-readable companion

人間向けDoc/SheetとJSON/YAML schemaの二層化を実装候補とする。machine-readable companionはPROPOSALであり、標準規格ではない。schema/tooling supportと実装互換性はavailability/UNKNOWNとして扱う。

利用できる条件

organization size / regulated role / jurisdiction / provider-plan-tenant / data classification / identity-admin model / tool-action capability / audit-log availability / retention / incident process / deployment lifecycle / document-system permissions / exportability / schema-tooling support。

確認・評価方法

テンプレート品質を項目数では評価しない。以下を評価対象とする。

  • synthetic changeから影響system/source/eval/approval/rollbackを辿れるか。
  • incidentから変更/version/ownerへ辿れるか。
  • stale/UNKNOWNを検出できるか。
  • 別担当者が同じartifactから次行動を再現できるか。
  • 機密情報を不要複製しないか。

外部benchmark値は未採集。

確認・評価方法 2

TEST_PROFILE-029-A TRACEABILITY DRILL — UNEXECUTED

架空systemにmodel変更を与え、change → source → eval → approval → deployment → rollbackまで全IDが辿れるか確認する。

TEST_PROFILE-029-B STALE/UNKNOWN DRILL — UNEXECUTED

owner不在、期限切れsource、UNKNOWN gate、旧model versionを混入し、readinessが誤ってPASSにならないか確認する。

TEST_PROFILE-029-C INCIDENT LINKAGE — UNEXECUTED

架空near-missからincident → affected change/version → corrective action → re-evalへ遡及できるか確認する。

セキュリティとプライバシー

Security/Privacy: templateごとにaccess classとsecret/PII禁止欄を持ち、raw evidenceは必要に応じ別保管する。

Audit: immutable ID、created/updated、actor、version、evidence pointer、superseded_byを保持する。

Cost: template維持工数を記録し、使われないartifactを無制限に増やさない。

Operability: canonical location、owner、review cadence、stale threshold、archive/decommission ruleを保持する。

Cross-reference boundary

EA-026/027のdepartment/industry profileはoverlay field setとして接続する。EA-030の継続観測所はEVAL_RECORDとCHANGE_CONTRACTの時系列を再利用する。ただし本packetで関連EAを再編集・再解釈しない。

よくある失敗・反証

  • templateの存在はcontrol effectivenessを証明しない。

  • 空欄、copy-paste、stale status、証拠なしPASS、owner不在、version不一致を主要failure modeとして扱う。

  • PASS欄だけでVERIFIED_SPEC / OBSERVEDへ昇格させず、source/eval/readback等のpointerを要求する。

  • 一つの巨大spreadsheetへの統合を既定解にしない。権限分離、履歴、機密区分、並行更新、長期保守を損なう場合がある。

  • incident/security artifactへprompt、credential、PII、顧客情報を過剰複製しない。

  • OWASP COMPASSをEnterprise AI risk全体の網羅保証として扱わない。

  • NIST AI RMF/Playbook採用だけで法令・認証・契約complianceを証明しない。

実務での使い方

  • organization size / regulated role / jurisdiction / provider-plan-tenant / data classification / identity-admin model / tool-action capability / audit-log availability / retention / incident process / deployment lifecycle / document-system permissions / exportability / schema-tooling support。

  • TEST_PROFILE-029-A TRACEABILITY DRILL — UNEXECUTED

    架空systemにmodel変更を与え、change → source → eval → approval → deployment → rollbackまで全IDが辿れるか確認する。

    TEST_PROFILE-029-B STALE/UNKNOWN DRILL — UNEXECUTED

    owner不在、期限切れsource、UNKNOWN gate、旧model versionを混入し、readinessが誤ってPASSにならないか確認する。

    TEST_PROFILE-029-C INCIDENT LINKAGE — UNEXECUTED

    架空near-missからincident → affected change/version → corrective action → re-evalへ遡及できるか確認する。

  • Security/Privacy: templateごとにaccess classとsecret/PII禁止欄を持ち、raw evidenceは必要に応じ別保管する。

    Audit: immutable ID、created/updated、actor、version、evidence pointer、superseded_byを保持する。

    Cost: template維持工数を記録し、使われないartifactを無制限に増やさない。

    Operability: canonical location、owner、review cadence、stale threshold、archive/decommission ruleを保持する。

まだ確認できていないこと

  • EA-029-UNKNOWN-01
    • ISO/IEC 42001等の有償標準本文とのfield-level crosswalk
    • 各法域の必須記録
    • 特定providerのexport/audit field mapping
    • 実組織でのテンプレート維持コスト
    • JSON/YAML schemaの実装互換性
    • NIST AI RMF 1.0改訂およびPlaybook更新後のcurrent mapping

    UNKNOWNを推測で閉じない。

  • EA-029-UNKNOWN-CURRENTNESS

    外部根拠の再確認日がcanonical body/control-planeで確定していないため、currentnessはUNKNOWNとして保持する。日付を推測補完しない。

根拠資料

この記事には、直接開ける外部出典が登録されていません。出典IDや検証情報は末尾で確認できます。

出典ID・検証情報・機械可読データ

根拠の種類と情報の鮮度は、ラベルとアイコンで確認できます。

記事ID
EA-029
最終確認日
—
提供元・モデル・プラン・利用環境
—
対象地域
—
元資料の全文と収録照合記録
Public claim

運用テンプレートはAI統制を自動的に成立させるものではなく、判断・証拠・変更・未解決事項を再現可能に残すための器である。共通Coreを用意しつつ、法域・業界・組織・providerに応じて項目をtailorする。PASS/完了の記入だけでなく、根拠となるsource、eval、承認、readbackを結び付ける。

以下の10-artifact pack、field schema、common-ID linkageはEA-029のPROPOSALであり、外部標準が要求する固定schemaではない。

10-artifact pack

A. AI_SYSTEM_CARD

system_id、owner、purpose、users、provider/model/tool/data、decision/action impact、deployment state、dependencies、approved use、prohibited use、review date。

B. CHANGE_CONTRACT

change_id、affected system/config/prompt/model/tool/data、reason、risk delta、required eval、approval、rollout/canary、rollback trigger、effective_at。

C. WORK_STATE

state_id、active scope、last valid run/change、current blockers、next bounded action、canonical artifact pointers。

D. RISK_AUDIT_REGISTER

finding_id、claim/control、evidence、severity/impact、owner、disposition、due/review date、residual risk、closure evidence。

E. QUESTION_QUEUE

question_id、decision unlocked、required evidence、excluded inference、owner、status、stop condition。

F. EVIDENCE_SOURCE_RECORD

source_id、origin class、title/org、canonical locator、accessed/as-of、version/revision、supporting locator、evidence label、claim relation。

G. EVAL_RECORD

eval_id、system/change under test、dataset/fixture version、metric/scorer/judge、threshold、result、slices、failure cases、acceptance decision。

H. INCIDENT_NEAR_MISS_RECORD

incident_id、detection、affected system/users/data/action、severity、containment、evidence preservation、root cause、recovery、corrective change、notification/escalation。

I. DEPLOYMENT_READINESS_CHECK

inventory/owner/data/identity/tool/action/eval/audit/incident/recovery/cost/availability gatesをPASS / FAIL / NA / UNKNOWNで記録し、evidence pointerを付ける。

J. DECOMMISSION_EXIT_RECORD

reason、dependency inventory、export/retention/deletion、credential revocation、replacement/fallback、evidence preservation、completion verification。

Common-ID linkage

共通キーは system_id / change_id / eval_id / finding_id / source_id / incident_id / run_or_trace_id とする。文書名や自由記述だけで関係を追わない。このID辞書はPROPOSALである。

Change / Audit / Question / Stateは分離する。変更要求、現在地、未解決問い、監査所見を一枚に混ぜて、履歴上の事実と将来作業を上書きしない。

Evidence boundary

NIST AI RMF PlaybookはGovern / Map / Measure / Manageのsuggested actionsを提供するvoluntary・tailorableなresourceであり、standardized documentation、AI system inventory、error/incident records、system change database、version history、monitoring/recovery/change management等を扱う。EA-029の固定10-artifact schemaそのものをNIST要件として扱わない。

NIST AI 600-1はcross-sector GenAI profileとしてcontextを与える。OWASP GenAI Incident Response GuideとThreat Defense COMPASSはincident responseやiterative threat prioritizationのpractitioner resourceとして扱う。OpenTelemetry Semantic Conventionsはtrace/metric/log/resource等の命名標準化に利用できるが、EA-029 governance template全体の標準ではない。

既存辞典で使うWork_STATE、Audit Register、Question Queue等はchat-primary/internal operating artifactsとして別originを保持し、外部標準由来へ再分類しない。

Machine-readable companion

人間向けDoc/SheetとJSON/YAML schemaの二層化を実装候補とする。machine-readable companionはPROPOSALであり、標準規格ではない。schema/tooling supportと実装互換性はavailability/UNKNOWNとして扱う。

Failure envelope
  • templateの存在はcontrol effectivenessを証明しない。
  • 空欄、copy-paste、stale status、証拠なしPASS、owner不在、version不一致を主要failure modeとして扱う。
  • PASS欄だけでVERIFIED_SPEC / OBSERVEDへ昇格させず、source/eval/readback等のpointerを要求する。
  • 一つの巨大spreadsheetへの統合を既定解にしない。権限分離、履歴、機密区分、並行更新、長期保守を損なう場合がある。
  • incident/security artifactへprompt、credential、PII、顧客情報を過剰複製しない。
  • OWASP COMPASSをEnterprise AI risk全体の網羅保証として扱わない。
  • NIST AI RMF/Playbook採用だけで法令・認証・契約complianceを証明しない。
Availability gates

organization size / regulated role / jurisdiction / provider-plan-tenant / data classification / identity-admin model / tool-action capability / audit-log availability / retention / incident process / deployment lifecycle / document-system permissions / exportability / schema-tooling support。

Template quality evaluation

テンプレート品質を項目数では評価しない。以下を評価対象とする。

  • synthetic changeから影響system/source/eval/approval/rollbackを辿れるか。
  • incidentから変更/version/ownerへ辿れるか。
  • stale/UNKNOWNを検出できるか。
  • 別担当者が同じartifactから次行動を再現できるか。
  • 機密情報を不要複製しないか。

外部benchmark値は未採集。

TEST_PROFILE

TEST_PROFILE-029-A TRACEABILITY DRILL — UNEXECUTED

架空systemにmodel変更を与え、change → source → eval → approval → deployment → rollbackまで全IDが辿れるか確認する。

TEST_PROFILE-029-B STALE/UNKNOWN DRILL — UNEXECUTED

owner不在、期限切れsource、UNKNOWN gate、旧model versionを混入し、readinessが誤ってPASSにならないか確認する。

TEST_PROFILE-029-C INCIDENT LINKAGE — UNEXECUTED

架空near-missからincident → affected change/version → corrective action → re-evalへ遡及できるか確認する。

Security / privacy / audit / cost / operability

Security/Privacy: templateごとにaccess classとsecret/PII禁止欄を持ち、raw evidenceは必要に応じ別保管する。

Audit: immutable ID、created/updated、actor、version、evidence pointer、superseded_byを保持する。

Cost: template維持工数を記録し、使われないartifactを無制限に増やさない。

Operability: canonical location、owner、review cadence、stale threshold、archive/decommission ruleを保持する。

OPEN_UNKNOWN
  • ISO/IEC 42001等の有償標準本文とのfield-level crosswalk
  • 各法域の必須記録
  • 特定providerのexport/audit field mapping
  • 実組織でのテンプレート維持コスト
  • JSON/YAML schemaの実装互換性
  • NIST AI RMF 1.0改訂およびPlaybook更新後のcurrent mapping

UNKNOWNを推測で閉じない。

Cross-reference boundary

EA-026/027のdepartment/industry profileはoverlay field setとして接続する。EA-030の継続観測所はEVAL_RECORDとCHANGE_CONTRACTの時系列を再利用する。ただし本packetで関連EAを再編集・再解釈しない。

  • EA-029-R11-RESEARCH研究資料研究資料根拠の出所: AUDITED_CANONICAL_RESEARCH_PACKET

    EA-029 監査済みresearch / canonical revision binding

    裏付ける内容
    運用テンプレートはAI統制を自動的に成立させるものではなく、判断・証拠・変更・未解決事項を再現可能に残すための器である。共通Coreを用意しつつ、法域・業界・組織・providerに応じて項目をtailorする。PASS/完了の記入だけでなく、根拠となるsource、eval、承認、readbackを結び付ける。
    確認日
    —
    出典・実験ID
    COMM-031-EA0029
    検証箇所
    COMM-031-EA0029 · EA-029-R5-LEGACY-MIGRATION-20261008-R1 · content/staging/EA-029.md
    適用範囲
    監査済みEA本文・canonical revision・既存Source Graph relationの範囲。欠損currentnessは推測で閉じない。
    出典・来歴
    AUDIT_PASS_CANONICAL_BINDING
    限界
    canonical監査・revision bindingの存在を示す。外部ソースcurrentnessが本文またはcontrol-planeで確定していない場合は、currentnessをUNKNOWNのまま保持する。
  • EA-029-R11-WEB-READBACK実装資料実装資料根拠の出所: IMPLEMENTATION_READBACK

    EA-029 Web body identity / canonical readback

    裏付ける内容
    canonical staging bodyのSHA-256一致とR9 canonical ledger readbackをProduction projectionの入力として検証する。
    確認日
    —
    出典・実験ID
    WEBBODY-EA0029-R8-B8D7C4DC
    検証箇所
    WEBBODY-EA0029-R8-B8D7C4DC · content/staging/EA-029.md · EA-029-R5-LEGACY-MIGRATION-20261008-R1
    適用範囲
    R9/R10 canonical readback後のProduction生成時body identity。
    出典・来歴
    CANONICAL_READBACK_BODY_HASH_MATCH
    限界
    body identity/readbackは本文claim自体の真偽や外部ソースの最新性を追加保証しない。
出典ID
COMM-031-EA0029, WEBBODY-EA0029-R8-B8D7C4DC
追跡中のUNKNOWN ID
EA-029-UNKNOWN-01, EA-029-UNKNOWN-CURRENTNESS
再確認のきっかけ
canonical revision/publication state change · body artifact hash change · source currentness change · new contradiction or implementation readback

機械検査: 通過 — Automated validation does not guarantee accuracy or authorize execution.

    同じ記事IDの機械可読データです。