本文へスキップ

FrontierMath

新規未発表の問題で構成された数学ベンチマーク

公式サイトを見る

FrontierMath とは

本ベンチマークは人工知能が複雑な数学の問題を解く限界を測る場と紹介され、60 人超の数学者が作成に関わり、代数幾何から Zermelo-Fraenkel 集合論まで現代数学の全領域を扱うと説明されている。 資料は全問題が新規かつ未発表で、データ汚染の懸念を除くとしている。

ベンチマークの構成

  • 各問題は専門の数学者に数時間の作業を求めるとされる
  • 全問題が新規かつ未発表でデータ汚染の懸念に対応
  • 問題は研究水準の深さと幅を持つ
  • 手法・評価手順・分析をまとめた学術論文が添えられる

活用の例

  • 数学者が理論を試し新たな解法を探す
  • AI 研究者がシステムの評価と改善に用いる
  • 教育機関が興味を促す教材として用いる

導入の手順

  • FrontierMath のサイトにアクセスする
  • 問題と分野を一覧し興味のあるものを選ぶ
  • 問題の説明と関連する背景情報を読む
  • 関連する学術論文をダウンロードまたはオンラインで読む

長所と短所

✓ 良い点

  • 全問題が新規かつ未発表でデータ汚染の懸念に対応
  • Fields Medalist を含む専門家による難度への評価を収録

! 注意したい点

  • 各問題は専門の数学者が数時間を要すると説明される
  • 資料は現在の AI システムが解ける割合を 2% 未満とする

よくある質問

問題の作成者は?

資料は 60 人超の数学者が協力したと説明。

問題は公開済み?

資料は全問題が新規かつ未発表で、データ汚染の懸念を除くと説明。

最終評価日: 2026-11-15

その他 LLM APIプラットフォーム ツール

すべて見る →

評価方法