本文へスキップ

HOI-Swap

手と物のやり取りを踏まえた動画の物体差し替え

公式サイトを見る

HOI-Swap とは

本フレームワークは拡散モデルに基づき手と物のやり取りを扱う動画編集の仕組みと紹介され、一枚のフレームの差し替えから動画全体へ広げると説明されている。

できること

  • 用意した参照画像で物体を差し替える
  • 物の形と働きの変化に合わせ手の動きを整える
  • 自ら作った学習データで学ぶ

活用場面

  • 動画制作者が物体を差し替え場面をより実物らしくする
  • ポストプロダクションが差し替え後の手の動きを調整する
  • VR 開発者が自然な手と物のやり取りを作る

長所と短所

✓ 良い点

  • 物の形と働きに合わせ握り方が変わる
  • 第二段階で動画全体を組み直す

! 注意したい点

  • 編集は一枚のフレームから始まる
  • 物体の参照画像が必要

よくある質問

段階はいくつ?

資料は一枚のフレームの段階と、動画列へ広げる段階を説明。

注釈は要る?

資料は自己学習で外部の注釈データが不要と説明。

最終評価日: 2026-11-15

その他 AI動画生成 ツール

すべて見る →

評価方法