本文へスキップ

Elimination Game

人狼風の対局で大規模言語モデルの社交推理を測る

公式サイトを見る

Elimination Game とは

Elimination Game は大規模言語モデルが複雑な社交の場でどう振る舞うかを測るベンチマークと紹介され、人狼遊びに着想を得たと説明されている。

できること

  • 多人数の競争環境を模す
  • 公開の議論と内密の会話を動かす
  • 投票による脱落で戦略的な判断を評価する
  • 詳しい評価の指標を読む

活用場面

  • 研究者がモデルの社交推理を比べる
  • 教育の場が AI の振る舞いを示す
  • 開発者が自作モデルの戦略を確かめる

導入の手順

  • 公式サイトか GitHub の保管庫で手引きを読む
  • 枠とやり取りできる言語モデルを用意する
  • 試験の場で人数や回数を設定する
  • 議論・内密の会話・投票の情報を記録する

長所と短所

✓ 良い点

  • 複数の言語モデルが試験に参加できる
  • 詳しい評価の指標が挙がる

! 注意したい点

  • 設定は社交の脱落遊びに限られる
  • 結果は参加するモデルに左右される

よくある質問

何を測る?

資料は社交推理、戦略の選択、欺きを挙げる。

どんな交流を模す?

資料は公開の議論、内密の会話、投票による脱落を挙げる。

最終評価日: 2026-11-15

その他 LLM APIプラットフォーム ツール

すべて見る →

評価方法