本文へスキップ

OpenCompass Multi-modal Leaderboard

マルチモーダルモデルのスコアを比べる更新型ランキング

公式サイトを見る

OpenCompass Multi-modal Leaderboard とは

マルチモーダルモデル(VLM)を評価し順位付ける随時更新の場と紹介される。8 個のマルチモーダルベンチマークから平均スコアを算出して詳細な性能データを示し、対象はオープンソースの VLM と公開 API に限られる。

できること

  • マルチモーダルモデルの随時更新の順位と性能データを見る
  • 各ベンチマークのスコアを含む詳細レポートを読む
  • VLMEvalKit で PR を作り新しいモデルを追加する
  • 問い合わせ用のメールアドレスから支援を受ける

活用場面

  • 研究者が特定タスクでのモデル性能を比べる
  • 開発者が用途に合うモデルをランキングのデータから選ぶ
  • 企業の意思決定者が調達や研究開発の方針を立てる

導入の手順

  • OpenCompass Multi-modal Leaderboard のサイトにアクセスする
  • 現在の順位と性能データを確認する
  • 興味のあるモデルをクリックし詳しい性能レポートを得る
  • 新しいモデルを追加する場合は VLMEvalKit で PR を作る

長所と短所

✓ 良い点

  • VLMEvalKit で PR を作り新モデルを追加できる
  • 問い合わせ用メールでの支援窓口が挙がる

! 注意したい点

  • 収録はオープンソースの VLM と公開 API に限られる
  • 平均スコアは掲載の 8 個のマルチモーダルベンチマークから算出

よくある質問

平均スコアはどう算出?

8 個のマルチモーダルベンチマークから平均スコアを算出する。

収録されるモデルは?

オープンソースの VLM と公開 API に限られる。

最終評価日: 2026-11-15

その他 AIオフィスアシスタント ツール

すべて見る →

評価方法