Upgrade to Pro — share decks privately, control downloads, hide ads and more …

GNeRF: GAN-based Neural Radiance Field without ...

peisuke
December 12, 2021

GNeRF: GAN-based Neural Radiance Field without Posed Camera

第9回全日本コンピュータビジョン勉強会
ICCV2021論文読み回発表資料
GNeRF: GAN-based Neural Radiance Field without Posed Camera

peisuke

December 12, 2021
Tweet

More Decks by peisuke

Other Decks in Technology

Transcript

  1. • • GNeRF: GAN-based Neural Radiance Field without Posed Camera

    • • NeRF • • • GAN Radiance Field • RF
  2. NeRF • NeRF in the Wild • NeRF • iNeRF

    • iNeRF NeRF in the Wild BP
  3. 条件 iNeRF NeRF-- IDR GNeRF(提案⼿法) 事前学習 必要 不要 不要 不要

    粗いカメラ座標 必要 必要 必要 不要 前⽅のみの制約 不要 必要 不要 不要 マスク 不要 不要 必要 不要 • •
  4. • 6 𝑹 = 𝑟!! 𝑟!" 𝑟!# 𝑟"! 𝑟"" 𝑟"#

    𝑟#! 𝑟#" 𝑟## 𝒓 = 𝑟!! 𝑟!" 𝑟!# 𝑟"! 𝑟"" 𝑟"# $ • SO(3) NN • On the Continuity of Rotation Representations in Neural Networks
  5. • • Generator • NeRF • Discriminator • Instance Normalization

    Spectral Normalization • Inversion network • Vision Transformer • • A • A B 1 iteration • B
  6. • • COLMAP NeRF C+n • Refine C+r • Ground

    Truth NeRF G+n • • Synthetic-NeRF image size: 400x400 DTU 500x400 • 100 • • Peak Signal-to-Noise Ratio SSIM LPIPS • / • Single TAITAN GPU 30