ディベートが弱い審判を助けるのは批判者が上回る場合のみ
AIディベートの研究では、弱い審判が正解をより正確に識別できるのは、批判を行うモデルが審判自身のエラー分類能力を上回る場合に限られることが分かった。
### 研究概要
モデル **Claude Opus 4.6** のような強力なモデルと **Opus 4.5** のような弱い判断モデルを組み合わせた研究では、デベートはコンサルタントを約 **14-16** パーセンテージポイント上回る **F1スコア** を達成したが、特定の条件下でのみであった。デベートは、批評モデルの分類能力が判断モデルの能力を上回り、判断モデルが批評を権威として扱わず積極的に検証した場合に成功した。研究者らは、最初の批評メッセージから主に利益が得られ、反論ラウンドは推論中にほとんど価値をもたらさないことを発見した。結果は、デベートがスケーラブルな監視のための部分的な解決策であることを示唆しており、監査が実際に批評家が判断に欠落するエラーを識別できることを保証するために必要である。