本文へスキップ

SuperCLUE

共通の課題で大規模言語モデルを比べる

公式サイトを見る

SuperCLUE とは

本場は標準化された課題とランキングで大規模言語モデルを評価し比較するオンラインの場と紹介されている。

できること

  • 数学的推論やコード生成の課題を動かす
  • モデルの結果をランキングに提出する
  • 詳しい評価レポートを読む
  • API を通じて試験を自動化する

導入の手順

  • サイトにアクセスしアカウントを登録する
  • 課題を選び基準を確かめる
  • モデルを用意し結果を提出する
  • 評価レポートを読んで振り返る

長所と短所

✓ 良い点

  • 資料は課題とランキングの随時更新を挙げる
  • 標準化された試験環境が説明される

! 注意したい点

  • 評価は提出されたモデルの結果を軸にする
  • オンラインのサービスと説明される

よくある質問

どの課題が挙がる?

資料は数学的推論、コード生成、非常に長いテキストの処理を挙げる。

どの規模が挙がる?

資料は 14B と 7B の規模を挙げる。

最終評価日: 2026-11-15

その他 LLM APIプラットフォーム ツール

すべて見る →

評価方法