diffusion-as-shader とは
当モデルは 3D 追跡動画を制御入力に使う動画生成の制御モデルと説明され、一つの構成で複数の制御課題を扱う。
できること
- テキスト指示、画像、アニメーションのメッシュを用意する
- 深度マップやオブジェクトの分割などを前処理する
- 3D 追跡の入力から動画を生成する
注意点
- Depth Pro と SAM が前処理の道具に挙がる
- カメラの軌道は利用者が指定する
- 時間的な一貫性が掲げる目標
長所と短所
✓ 良い点
- 3D 追跡動画が時間的な一貫性を高める
- 少ないデータでの微調整が説明される
! 注意したい点
- 指示や画像、メッシュは利用者が用意する
- 深度マップなどの前処理が先に要る
よくある質問
制御入力は何?
資料では 3D 追跡動画が制御入力と説明。
開発したのは誰?
資料では香港の大学など複数の研究チームによると説明。
最終評価日: 2026-11-15
その他 AI動画生成 ツール
すべて見る →-
1703 顔出しなしの YouTube 動画を短時間で 無料ツール クリエイターツール 動画生成ツール 発話アバター -
A2E ボイスクローンに対応したデジタルヒューマンの動画 動画生成ツール 画像から動画 リップシンク動画 デジタルヒューマン 音声クローン -
A9 ブランドが既に持つ素材から短い販促クリップを作る 無料ツール 動画生成ツール ショート動画 -
Adobe Firefly Video テキストや画像から短い動画を生成し、言語をまたいで翻訳できる 無料ツール 動画生成ツール テキストから動画 画像から動画 デザインツール -
Adpex 動画・画像・コードを1つの Web アプリで 無料ツール マルチモデルプラットフォーム 画像編集 動画生成ツール コーディング -
AdsTurbo 有料ソーシャル向けの動画広告のバリエーション 動画生成ツール ショート動画 動画広告 動画翻訳 広告クリエイティブ