VideoDrafter とは
本フレームワークは入力提示から内容の一致した多場面の動画を生成するものと紹介されている。大規模言語モデルが出来事・実体・カメラの動きを含む脚本を作り、拡散モデルが参照画像を用いて場面をまたぐ内容の一致を高める。
できること
- 入力された提示を多場面の総合脚本へ変換する
- 出来事、前景と背景の実体、カメラの動きを記述する
- 共通する実体ごとに参照画像を生成する
- 拡散過程により多場面の動画を生成する
活用場面
- 複数の場面を描写する映画の脚本を生成する
- 内容の一致した多場面の観光宣伝動画を作る
- 複数場面にわたる映画の特殊効果を生成する
生成の流れ
- 大規模言語モデルが入力提示を多場面の脚本へ変換する
- 共通する実体ごとに詳細な記述を LLM が行う
- テキストから画像へのモデルが各記述から参照画像を生成する
- 拡散モデルが参照画像を条件と位置合わせに用い内容の一致を高める
長所と短所
✓ 良い点
- 参照画像を条件と位置合わせに用い内容の一致を高める
- 脚本に出来事・前景と背景の実体・カメラの動きが含まれる
! 注意したい点
- 流れは入力提示と大規模言語モデルによる脚本から始まる
- 内容の一致は拡散モデルが用いる参照画像に左右される
よくある質問
脚本には何が含まれる?
資料は出来事の記述、前景と背景の実体への提示、カメラの動きへの提示を挙げる。
内容の一致はどう保たれる?
拡散モデルが参照画像を条件と位置合わせに用い多場面動画の内容の一致を高める。
最終評価日: 2026-11-15
その他 AI動画生成 ツール
すべて見る →-
1703 顔出しなしの YouTube 動画を短時間で 無料ツール クリエイターツール 動画生成ツール 発話アバター -
A2E ボイスクローンに対応したデジタルヒューマンの動画 動画生成ツール 画像から動画 リップシンク動画 デジタルヒューマン 音声クローン -
A9 ブランドが既に持つ素材から短い販促クリップを作る 無料ツール 動画生成ツール ショート動画 -
Adobe Firefly Video テキストや画像から短い動画を生成し、言語をまたいで翻訳できる 無料ツール 動画生成ツール テキストから動画 画像から動画 デザインツール -
Adpex 動画・画像・コードを1つの Web アプリで 無料ツール マルチモデルプラットフォーム 画像編集 動画生成ツール コーディング -
AdsTurbo 有料ソーシャル向けの動画広告のバリエーション 動画生成ツール ショート動画 動画広告 動画翻訳 広告クリエイティブ