本文へスキップ

InterTrack

単眼 RGB 動画で人と物体の相互作用を追跡

公式サイトを見る

InterTrack とは

本手法は単眼 RGB 動画で人と物体の相互作用を追う技術と説明されている。遮蔽や動きの大きい場面でも追跡が途切れにくい。

仕組み

  • 単一視点の再構成で各フレームの相互作用を復元する
  • 効率的なオートエンコーダで SMPL 頂点を出す
  • 時間的な対応の一貫性を取り入れる

モデルに関する覚書

  • ProciGen-Video に 10 時間分の合成動画が入る
  • BEHAVE と InterCap での実験が報じられている
  • テンプレート方式の追跡との比較が示される

長所と短所

✓ 良い点

  • 物体テンプレートが要らない
  • 時間情報で遮蔽下の物体の滑らかな回転を予測する

! 注意したい点

  • 入力は単眼 RGB 動画に限られる
  • 学習は合成の相互作用動画に依存する

よくある質問

物体テンプレートは要る?

資料では物体テンプレートを一切使わない手法と説明されている。

どのデータセットが挙がる?

資料では ProciGen-Video、BEHAVE、InterCap が挙がっている。

最終評価日: 2026-11-15

その他 AI動画生成 ツール

すべて見る →

評価方法