本文へスキップ

VideoDrafter

提示から内容の一致した多場面動画を生成

公式サイトを見る

VideoDrafter とは

本フレームワークは入力提示から内容の一致した多場面の動画を生成するものと紹介されている。大規模言語モデルが出来事・実体・カメラの動きを含む脚本を作り、拡散モデルが参照画像を用いて場面をまたぐ内容の一致を高める。

できること

  • 入力された提示を多場面の総合脚本へ変換する
  • 出来事、前景と背景の実体、カメラの動きを記述する
  • 共通する実体ごとに参照画像を生成する
  • 拡散過程により多場面の動画を生成する

活用場面

  • 複数の場面を描写する映画の脚本を生成する
  • 内容の一致した多場面の観光宣伝動画を作る
  • 複数場面にわたる映画の特殊効果を生成する

生成の流れ

  • 大規模言語モデルが入力提示を多場面の脚本へ変換する
  • 共通する実体ごとに詳細な記述を LLM が行う
  • テキストから画像へのモデルが各記述から参照画像を生成する
  • 拡散モデルが参照画像を条件と位置合わせに用い内容の一致を高める

長所と短所

✓ 良い点

  • 参照画像を条件と位置合わせに用い内容の一致を高める
  • 脚本に出来事・前景と背景の実体・カメラの動きが含まれる

! 注意したい点

  • 流れは入力提示と大規模言語モデルによる脚本から始まる
  • 内容の一致は拡散モデルが用いる参照画像に左右される

よくある質問

脚本には何が含まれる?

資料は出来事の記述、前景と背景の実体への提示、カメラの動きへの提示を挙げる。

内容の一致はどう保たれる?

拡散モデルが参照画像を条件と位置合わせに用い多場面動画の内容の一致を高める。

最終評価日: 2026-11-15

その他 AI動画生成 ツール

すべて見る →

評価方法