本文へスキップ

SignLLM

文章やプロンプトから多言語の手話動作を生成

公式サイトを見る

SignLLM とは

SignLLM は公開の手話データに基づく初の多言語手話生成モデルと紹介され、米国手話(ASL)とほか七つの手話を扱い、文章やプロンプトから手話の動作を生成すると説明されている。

できること

  • 多言語手話のデータセットを構築し最適化する
  • 文章やプロンプトから手話の動作を生成する
  • 二つの多言語手話生成の方式を使う
  • スタイル変換と専用の微調整で出力を実在の人間の外見に変える

導入の手順

  • 公式サイトで関連データセットとコードをダウンロードする
  • 文書に従い手話動画をモデル向けの形式へ変換する
  • 用意された多言語手話生成の方式で学習を行う
  • 強化学習のモジュールで学習過程を最適化する

活用場面

  • ろう者のコミュニティが手話を学び伝達力を伸ばす
  • 手話通訳者がリアルタイムの通訳作業に役立てる
  • 教育機関が手話を学ぶ学生向けの補助教材にする

長所と短所

✓ 良い点

  • 文章やプロンプトから直接手話の動作を生成できる
  • スタイル変換と専用の微調整で出力を実在の人間の外見に変えられる

! 注意したい点

  • 学習前に手話動画をモデル向けの形式へ変換する必要がある
  • データセットとコードは公式サイトからの取得が前提

よくある質問

対応する手話は?

資料は米国手話(ASL)とほか七つ、計八つの手話を挙げる。

学習はどう改善される?

資料は強化学習で学習を速めデータ抽出の質を高めると説明。

最終評価日: 2026-11-15

その他 AI画像生成 ツール

すべて見る →

評価方法