本文へスキップ

JoyGen

音声から話す顔の動画を生成する

公式サイトを見る

JoyGen とは

本技術は音声で動く 3D 奥行き認識の話す顔動画生成と説明され、唇の動きと見た目の合成を組み合わせる。

できること

  • バーチャル配信者向けに話す顔の動画を作る
  • アニメ制作でキャラクターの発話を作る
  • オンライン教育向けに教員の話す動画を作る

注意点

  • 流れには明瞭な入力音声が要る
  • 合成の段階で顔の奥行き情報を使う
  • 二段階の生成枠組みが説明される

長所と短所

✓ 良い点

  • 中国語と英語など複数言語に対応
  • 大規模な中国語の話す顔データセットが用意される

! 注意したい点

  • 流れには明瞭な入力音声が要る
  • 合成の段階で顔の奥行き情報を使う

よくある質問

二段階の内容は?

音声による唇の動きの生成と、見た目の合成。

どの言語が挙がる?

中国語や英語などが対応言語として挙がる。

最終評価日: 2026-11-15

その他 AI動画生成 ツール

すべて見る →

評価方法