# Model Debate／Deliberation CURRENT_STATUS: UNKNOWN OBSERVATION: SPEC_ONLY FRESHNESS: UNKNOWN PAGE_TYPE: reference CANONICAL_URL: /tools/ea-123-model-debate-deliberation CLAIM_IDS: none EVIDENCE_IDS: EVD-EA-123-URL-992190A4815D, EA-123-R11-RESEARCH, EA-123-R11-WEB-READBACK UNKNOWN_IDS: EA-123-UNKNOWN-01, EA-123-UNKNOWN-CURRENTNESS OPS_IDS: none ## Summary 「Multiagent Debate原著は複数LLM instanceの複数round提案・反証が特定taskの推論/factualityを改善し得ると報告した。debateの合意は外部証拠・独立検証・人間監督の代替ではなく、業務適用には反証・abstain・費用上限が必要である。」 ## Current judgment 原著は、複数LLM instanceが個別回答・reasoningを提案し、複数roundでdebateして共通final answerへ到達する手法を提示し、論文内の複数taskで数学/戦略推論とfactual validityの改善を報告する。確立されるのは論文が設定した手続・task・model条件下の研究結果であり、debateが真理判定機関になることではない。合意は独立な証拠・外部検証・人間監督の代替ではない。 ## Scope multi-LLM / evaluation / governance / implementation / cost ## Confirmed - 原著は、複数LLM instanceが個別回答・reasoningを提案し、複数roundでdebateして共通final answerへ到達する手法を提示し、論文内の複数taskで数学/戦略推論とfactual validityの改善を報告する。確立されるのは論文が設定した手続・task・model条件下の研究結果であり、debateが真理判定機関になることではない。合意は独立な証拠・外部検証・人間監督の代替ではない。 ## UNKNOWN - EA-123-UNKNOWN-01: debateの最適round、モデル独立性、誤り相関、domain-specific evidence、long-horizon agentでの効果、費用対効果、企業データ漏えい。 - EA-123-UNKNOWN-CURRENTNESS: 外部根拠の再確認日がcanonical body/control-planeで確定していないため、currentnessはUNKNOWNとして保持する。日付を推測補完しない。 ## Evidence - EVD-EA-123-URL-992190A4815D (RESEARCH): source class: primary research paper; exact title: Improving Factuality and Reasoning in Language Models through Multiagent Debate; author/org: Yilun Du, Shuang Li, Antonio Torralb — https://arxiv.org/abs/2305.14325 - EA-123-R11-RESEARCH (RESEARCH): EA-123 監査済みresearch / canonical revision binding - EA-123-R11-WEB-READBACK (IMPL): EA-123 Web body identity / canonical readback ## Failure / limits 同じ誤前提・学習偏り・prompt injectionを共有するagent同士は誤りを補強し得る。多数派/強い話者への追従、round増加によるコストと遅延、最終合意によるuncertainty消失は設計上のfailure envelopeであり、本原著abstractから発生率は確定できない（INFERENCE/UNKNOWN）。 ## Failure / limits consensus・多数決・流暢なrebuttalを正しさの証明としない。論文の改善結果を全業務・全モデルへ一般化しない。 UNIT_CLOSE_STATUS: INDIVIDUAL_BOUNDED_CLOSE / EVIDENCE_RECORDED / UNKNOWN_PRESERVED --- ## Practice model/API availability、同時実行、context budget、debate protocol、external evidence/tool access、human escalation、data policyを確認する。実debate run未実施。 ## Practice independent proposal→evidence challenge→rebuttal→judge/verification→abstainという段階を設計候補とし、合意しない経路を残す。実装・task-specific calibration未実施。 ## Practice single/majority/debateを同じfixtureで比較し、answer correctness、evidence entailment、counterexample discovery、agreement、abstention、turn/token/latency costを分離。合意率を正確性と同一視しない。 ## Practice SECURITY/PRIVACY: candidate間のsecret redaction、untrusted evidence隔離。AUDIT: round graph、model/version、claims、counterclaims、judge、human decision。COST: rounds×agents×judge。OPERABILITY: max rounds、early stop only with evidence, disagreement queue。 ## Practice 本文改訂では debate topology、独立性、外部evidence、judge、disagreement、停止条件を明示し、原著のtask/model/round条件を付記する。 ## WHY_THIS_MATTERS_TO_UPDATE 複数モデルに提案・反証・再回答させる方式は、単一回答の見落としを検出し得るが、合意形成を正しさと誤認すると誤りの相互強化を招く。 ## SCOPE_ROUTING multi-LLM / evaluation / governance / implementation / cost ## CLAIM_OR_RESEARCH_QUESTION Multiagent Debate原著は、複数instanceの複数round debateがreasoning/factualityへどの効果を示したか。debate回数・合意・モデル差を一般業務へ適用できるか。 ## EVIDENCE TABLE - source class: primary research paper; exact title: Improving Factuality and Reasoning in Language Models through Multiagent Debate; author/org: Yilun Du, Shuang Li, Antonio Torralba, Joshua B. Tenenbaum, Igor Mordatch; canonical URL: https://arxiv.org/abs/2305.14325; publication/update/access: submitted 2023-05-23 / accessed 2026-09-13 JST; version/release/tag/commit/API revision/model ID: arXiv v1; supporting locator: abstract lines 8-24（multiple instances propose/debate over rounds、mathematical/strategic reasoning、factual validity/hallucination claims、black-box models）; evidence label: RESEARCH; relation: support / limit. ## FINDINGS 原著は、複数LLM instanceが個別回答・reasoningを提案し、複数roundでdebateして共通final answerへ到達する手法を提示し、論文内の複数taskで数学/戦略推論とfactual validityの改善を報告する。確立されるのは論文が設定した手続・task・model条件下の研究結果であり、debateが真理判定機関になることではない。合意は独立な証拠・外部検証・人間監督の代替ではない。 ## LIMITS / COUNTEREVIDENCE / FAILURE ENVELOPE 同じ誤前提・学習偏り・prompt injectionを共有するagent同士は誤りを補強し得る。多数派/強い話者への追従、round増加によるコストと遅延、最終合意によるuncertainty消失は設計上のfailure envelopeであり、本原著abstractから発生率は確定できない（INFERENCE/UNKNOWN）。 ## AVAILABILITY_GATES model/API availability、同時実行、context budget、debate protocol、external evidence/tool access、human escalation、data policyを確認する。実debate run未実施。 ## IMPLEMENTATION_STATE independent proposal→evidence challenge→rebuttal→judge/verification→abstainという段階を設計候補とし、合意しない経路を残す。実装・task-specific calibration未実施。 ## BENCHMARK_OR_EVAL single/majority/debateを同じfixtureで比較し、answer correctness、evidence entailment、counterexample discovery、agreement、abstention、turn/token/latency costを分離。合意率を正確性と同一視しない。 ## SECURITY / PRIVACY / AUDIT / COST / OPERABILITY SECURITY/PRIVACY: candidate間のsecret redaction、untrusted evidence隔離。AUDIT: round graph、model/version、claims、counterclaims、judge、human decision。COST: rounds×agents×judge。OPERABILITY: max rounds、early stop only with evidence, disagreement queue。 ## SAFE_WORDING_FOR_FUTURE_BOOK 「Multiagent Debate原著は複数LLM instanceの複数round提案・反証が特定taskの推論/factualityを改善し得ると報告した。debateの合意は外部証拠・独立検証・人間監督の代替ではなく、業務適用には反証・abstain・費用上限が必要である。」 ## UPDATE_WORK_HANDOFF 本文改訂では debate topology、独立性、外部evidence、judge、disagreement、停止条件を明示し、原著のtask/model/round条件を付記する。 ## OPEN_UNKNOWN debateの最適round、モデル独立性、誤り相関、domain-specific evidence、long-horizon agentでの効果、費用対効果、企業データ漏えい。 ## STOP_CONDITION consensus・多数決・流暢なrebuttalを正しさの証明としない。論文の改善結果を全業務・全モデルへ一般化しない。 UNIT_CLOSE_STATUS: INDIVIDUAL_BOUNDED_CLOSE / EVIDENCE_RECORDED / UNKNOWN_PRESERVED --- NEXT: /agent/start.json STOP: This is a knowledge projection, not an execution order.