本文へスキップ

EmoTalk3D

音声から感情を制御できる 3D 頭部を合成

公式サイトを見る

EmoTalk3D とは

本企画は多視点の動画・感情の注記・各フレームの 3D 形状を用いる 3D 仮想頭部の合成研究と紹介され、視点の整合と感情表現の不足に向き合うと説明されている。

できること

  • 感情を制御できる 3D 頭部を合成する
  • 動画で広い視点を捉える
  • しわなどの動的な顔の細部を描画する

モデルの構成

  • 符号化器が音声の内容と感情を分ける
  • S2GNet が動的な 3D 点群を予測する
  • 描画の仕組みが自由視点の動画を生む

長所と短所

✓ 良い点

  • 資料は広い視点と動的な顔の細部を説明
  • 資料は唇の同期と描画の品質が高まったと説明

! 注意したい点

  • 資料は本企画を研究の取り組みと説明
  • 入力には求める感情を含む音声を用意する

よくある質問

S2GNet は何をする?

資料は音声から動的な 3D 点群を予測すると説明。

データセットの中身は?

資料は感情の注記を伴う多視点の頭部データと説明。

最終評価日: 2026-11-15

その他 AI動画生成 ツール

すべて見る →

評価方法