Upgrade to Pro — share decks privately, control downloads, hide ads and more …

Block NeRF

Block NeRF

Slide used in kantocv #cvsaisentan on 30/Apr/2023

Aki Teshima

April 30, 2023
Tweet

More Decks by Aki Teshima

Other Decks in Technology

Transcript

  1. Block-NeRF: Scalable Large Scene Neural View Synthesis Matthew Tancik, Vincent

    Casser, Xinchen Yan, Sabeek Pradhan, Ben Mildenhall, Pratul Srinivasan, Jonathan T. Barron, Henrik Kretzschmar tomoaki_teshima tomoaki0705 tomoaki_teshima tomoaki0705
  2. Pose estimation • NeRF(2020)はCOLMAPでカメラ位置を計算していた • 学習用データは車載カメラで収集された • We calculate the

    corresponding camera ray origins and directions in a common coordinate system • performing odometry using various sensors on the vehicle as the images are collected. • We assume that camera pose are provided • 初期位置としてGPSかなんかを使っている? 12
  3. Pose refinement • Previous NeRF based models [32,58,66,71]. • で研究されているPose

    Refinement(位置の最適化)を行う • 対象物体の形状を先に学習し、その後位置を最適化する 13
  4. Block NeRF selection • 指定位置の近傍のBlock NeRFだけ選択する • 近くてもVisibilityが低ければ選択しない • typically

    one to three Block-NeRFs left to merge. • 大規模な町でも実際マージするのは3個ぐらいの NeRF 15