1Dept. of Informatics, Univ. of Zurich and Dept. of Neuroinformatics, Univ. of Zurich and ETH Zurich. 2Technische Universitat Berlin, Einstein Center Digital Future and SCIoI Excellence Cluster, Germany. 全日本コンピュータビジョン勉強会 CVPR2022論文読み会 Godel @___Godel
が Event based image sensor 発売 • ICCV2021 のChampion Sponsor SONY がEvent cameraを発売,宣伝 • 画像機器展2021にてsonyセンサを用いたカメラ展示 • 応用利用、実環境での研究利用促進 • DNNによるEvent ⇔ Flame 相互変換 • EVENTのAnalog Neural Network(ANN)による,RGB同等の画像処理手 法 • spiking neural network(SNN)との連携 • SNNの学習手法の提案 • Intel Loihi2等SNNのハードウエアアクセラレータ開発 • DARPA the Fast Event-based Neuromorphic Camera and Electronics (FENCE) program • Raytheon, BAE Systems, and Northrop Grumman have been selected to develop event-based infrared (IR) camera technologies • These advanced models operate asynchronously and only transmit information about pixels that have changed. This means they produce significantly less data and operate with much lower latency and power. 参照論文:http://www.ecva.net/papers/eccv_2020/papers_ECCV/papers/123610086.pdf 参照動画:https://www.youtube.com/watch?v=sUqFM4xCZHI 可視画像ドメイン イベントカメラ画像ドメイン 物体検出ドメイン (バウンディング ボックス) 中間情報1 ドメイン 中間情報2 ドメイン Network Grafting Algorithm 親のニューラルネットワーク 子のニューラルネットワーク 知 識 蒸 留 ( 親 の 知 を 子 へ 伝 播 ) ド メ イ ン 適 応 スタイル変換 第五回 全日本コンピュータビジョン勉強会 ECCV2020読み会 全日本コンピュータビジョン 勉強会 ICCV2021読み会
SLAM;USLAM Real-time 3D reconstruction and 6-DoF tracking with an event camera EVO: A geometric approach to event-based 6-DOF parallel tracking and mapping in real-time Event-aided Direct Sparse Odometry;EDS Low-latency visual odometry using event-based feature tracks Event-based Stereo Visual Odometry;ESVO[26] Event Stereo Vision 既存イベントVOとの比較 EDSはIMUやステレオを用いな い方法であるが、それらを用い たESVO、USLAM、 EVO の方法 の性能を上回った
SLAM * ☑ × × Indirect Without loop closure ORB SLAM × ☑ × Indirect DSO* × ☑ × Direct Without recovery-tracking DSO × ☑ × Direct EDS(This work) ☑ ☑ × Direct