本文へスキップ

Hallo

音声で動かす拡散モデルによる肖像アニメーション

公式サイトを見る
カテゴリ AI画像生成

Hallo とは

本技術は復旦大学が開発した肖像画像のアニメーション手法と紹介され、拡散モデルで写実的かつ動的な肖像アニメーションを生成すると説明されている。

できること

  • 拡散モデルで写実的な肖像アニメーションを作る
  • 口唇・表情・姿勢の動きを音声と揃える
  • 表情と姿勢の多様性を適応的に制御する
  • 異なる人物に合わせて個別化する

仕組み

  • 中間顔表現に代えエンドツーエンドの拡散方式を採る
  • UNet ベースのノイズ除去器が画像品質を高める
  • 時間整合の技術でアニメーションと音声を同期する
  • 参照ネットワークが顔の動作精度を改善する

活用場面

  • 映画制作で写実的な表情と口の動きを生成する
  • ゲーム開発で仮想キャラクターに動的な顔のアニメを付ける
  • 仮想現実でより写実的な顔の反応を返す

長所と短所

✓ 良い点

  • UNet ベースのノイズ除去器で画像品質を高める
  • 参照ネットワークが顔の動作精度を改善

! 注意したい点

  • 資料に記された入口は製品ページと技術詳細
  • 口唇・表情・姿勢の整合は音声入力に左右される

よくある質問

開発元は?

資料は復旦大学を開発元として挙げる。

統合モジュールは何を揃える?

資料は口唇・表情・姿勢の動きと音声入力の整合を挙げる。

最終評価日: 2026-11-15

その他 AI画像生成 ツール

すべて見る →

評価方法