本文へスキップ

ActAnywhere

前景の被写体に沿う動画背景を生成

公式サイトを見る

ActAnywhere とは

ActAnywhere は被写体を意識した動画背景の生成モデルと紹介され、大規模な動画拡散モデルをこの課題向けに調整して用いると説明されている。 前景の被写体の分割列と条件画像を入力として受け取り、条件フレームに沿ったつながりのある動画を生成し、前景と背景の現実的な関わりも実現する。

できること

  • 前景の被写体の分割列と条件画像から動画背景を生成する
  • 生成される背景を前景の動きと見た目に合わせる
  • 被写体を含む合成フレームか背景だけのフレームを条件画像にする
  • カメラの動きが異なる動画背景を生成する

使用例

  • 人物の動きの分割列と海辺の画像から海辺を走る人物の合成動画を作る
  • 舞踏の分割列と古代の宮殿の画像から宮殿で舞踏が行われる様子を作る
  • 車の走行の分割列と高層ビルの画像から市街地を走る車の様子を作る

モデルについて

  • 大規模な動画拡散モデルを課題向けに調整して用いる
  • 大規模な人と物の関わりを扱う動画のデータ集合で学習される
  • 資料は多くの評価で基準を明確に上回ったと説明
  • 資料は人間以外の被写体を含むさまざまな標本への汎化を説明

長所と短所

✓ 良い点

  • 課題に合わせて調整した大規模な動画拡散モデルを用いる
  • 出力は前景と背景の現実的な関わりを実現すると説明

! 注意したい点

  • 入力には前景の被写体の分割列が必要
  • 生成は望む場面を描写した画像を条件とする

よくある質問

入力は何か?

資料は前景の被写体の分割列と、望む場面を描写した画像と説明。

学習データは?

資料は大規模な人と物の関わりを扱う動画のデータ集合と説明。

最終評価日: 2026-11-15

その他 AI動画生成 ツール

すべて見る →

評価方法