本文へスキップ

DreamFusion

2D 拡散で文章から照明を変えられる 3D 物体を作る

公式サイトを見る

DreamFusion とは

本手法は学習済みの 2D 拡散モデルを手がかりに、文章から照明を変えられる 3D 物体を作るものと紹介される。

できること

  • 文章から 3D 物体を生成する
  • どの角度からも物体を眺める
  • 照明を当て直し 3D の環境に重ねる

仕組み

  • Neural Radiance Field はランダムな初期状態から始まる
  • 勾配降下で 3D の表現を整える
  • 2D 拡散モデルは変更せずに用いる

長所と短所

✓ 良い点

  • 3D の学習データが不要
  • 画像拡散モデルに手を加えない

! 注意したい点

  • 生成はランダムに初期化した 3D から始まる
  • 手法は学習済みの 2D 拡散モデルに依存する

よくある質問

3D の学習データは要る?

資料は 3D の学習データが不要と説明される。

何を最適化する?

資料はランダム初期化の Neural Radiance Field を勾配降下で整えると説明する。

最終評価日: 2026-11-15

その他 AI画像生成 ツール

すべて見る →

評価方法