本文へスキップ

ALMA-13B-R

CPO と LoRA で追加学習した機械翻訳モデル

公式サイトを見る
カテゴリ AIモデル

ALMA-13B-R とは

ALMA-13B-R は ALMA を土台に Contrastive Preference Optimization で LoRA 追加学習を施した機械翻訳モデルと紹介され、資料は GPT-4 や WMT 受賞作に匹敵または上回ると述べる。

できること

  • ALMA と ALMA-R のモデルを取得する
  • 対応するデータセットを取得する
  • モデルの追加学習と配置を行う

モデルについて

  • ALMA の教師あり微調整を CPO が置き換える
  • 選好学習には三つ組の選好データが必要
  • モデルは Hugging Face のページに置かれる

長所と短所

✓ 良い点

  • モデル本体とデータセットを取得できる
  • 追加学習と配置が用途として記される

! 注意したい点

  • CPO の追加学習には三つ組の選好データが要る
  • GPT-4 や WMT 受賞作との比較は資料内の記述

よくある質問

どのように学習した?

資料は教師あり微調整ではなく CPO による LoRA 追加学習と説明。

何を取得できる?

GitHub リポジトリから ALMA と ALMA-R のモデルとデータセット。

最終評価日: 2026-11-15

その他 LLM APIプラットフォーム ツール

すべて見る →

評価方法