카카오맵의 3차원 공간 정보 생성 기술 소개

#비주얼컴퓨팅 #공간구성 #SpatialConnectionMap

카카오맵에서는 로드뷰 영상을 활용하여 3차원 공간 정보를 생성해 낼 수 있습니다.
본 세션에서는 카카오맵에서 공간 정보를 구성하는 3차원 위치 정보들을 로드뷰 영상으로부터 어떻게 구성하는지에 대해 소개하고, 구성된 공간의 보정 방법에 대해서도 설명 합니다.
마지막으로 이러한 정보들이 어떻게 활용될 수 있을지에 대해서도 소개하도록 하겠습니다.

발표자 : henny.choi
카카오 비주얼컴퓨팅셀에서 공간 구성 업무를 맡고 있는 Henny입니다. 영상과 3차원 공간을 다루는 일에 관심이 많습니다.

Transcript

1. 3ରਗ ҕр ҳࢿ ࢎ۹ ߂ ೱറ ߑೱࢿ ҕਬ
   Copyright 2022. Kakao Corp. All rights reserved. Redistribution or public display is not permitted without written permission from Kakao.
   ஠஠য়ݗ੄ 3ରਗ ҕр ੿ࠁ ࢤࢿ ӝࣿ ࣗѐ
   ୭അ୍ Henny.choi
   ஠஠য়
   if(kakao)2022
   

   View Slide

2. SCM (Spatial Connection Map) ࣗѐ
   3ରਗ ҕр ഛ੢੄ ೙ਃࢿ
   3ରਗ ҕр ҳࢿ ߑध
   ҕр ҳࢿ Ѿҗ੄ ࠁ੿ ࢎ۹ ߂ ѐࢶߑೱ
   ҕр ҳࢿ ؘ੉ఠ੄ ഝਊ
   

   View Slide

3. SCM (Spatial Connection Map) ࣗѐ
   3ରਗ ҕр ഛ੢੄ ೙ਃࢿ
   3ରਗ ҕр ҳࢿ ߑध
   ҕр ҳࢿ Ѿҗ੄ ࠁ੿ ࢎ۹ ߂ ѐࢶߑೱ
   ҕр ҳࢿ ؘ੉ఠ੄ ഝਊ
   

   View Slide

4. SCM (Spatial Connection Map) ࣗѐ
   Semantic segmentation
   Instance segmentation
   Object detection Text / Signboard detection Lane detection
   

   View Slide

5. SCM (Spatial Connection Map) ࣗѐ
   3ରਗ ҕр ഛ੢੄ ೙ਃࢿ
   3ରਗ ҕр ҳࢿ ߑध
   ҕр ҳࢿ Ѿҗ੄ ࠁ੿ ࢎ۹ ߂ ѐࢶߑೱ
   ҕр ҳࢿ ؘ੉ఠ੄ ഝਊ
   

   View Slide

6. ৵ 3ରਗੋо? - ಣݶীࢲ ಴അೞӝ য۰ਛ؍ ҕр ಴അ ૐ؀
   Location 1
   Location 2
   Location 3
   Location 1
   Location 2
   Location 3
   

   View Slide

7. ৵ 3ରਗੋо? - ؊਌ ੿ഛೠ ҕр ੿ࠁ ಴അ
   ӝઓ੄ ୫৔ ӝળ ਤ஖ ޙઁ:
   - Ѥޛ੄ ਬܻ ١ী ߈ࢎغݶࢲ ࢤӝח ਤ஖ য়ର
   - Ӕ୊੄ ର۝ ١ ੗ࢿਸ ڹ ޛ୓ٜী ੄ೠ ߑೱ য়ର

   ݒೝػ ҕр/੢ࣗ ੿ࠁٜ੄ ਤ஖ য়ରܳ ঠӝ
   

   3ରਗ ҕр ҳࢿ ߂ ݒೝ द:

   - ୫৔ػ ਤ஖ٜ੄ ਤ஖ ੿޻ب ೱ࢚
   - Ѩ୹ػ ੢ࣗ ੿ࠁٜ੄ ਤ஖ ੿޻ب ೱ࢚
   ݒೝػ ҕр/੢ࣗ ੿ࠁٜ੄ ࢚؀੸ ਤ஖ ੿޻ب ೱ࢚
   True position
   

   View Slide

8. SCM (Spatial Connection Map) ࣗѐ
   3ରਗ ҕр ഛ੢੄ ೙ਃࢿ
   3ରਗ ҕр ҳࢿ ߑध
   ҕр ҳࢿ Ѿҗ੄ ࠁ੿ ࢎ۹ ߂ ѐࢶߑೱ
   ҕр ҳࢿ ؘ੉ఠ੄ ഝਊ
   

   View Slide

9. ҕр ҳࢿਸ ਤೠ ؘ੉ఠ ઙܨ
   LIDAR ؘ੉ఠ ੉޷૑ ӝ߈ ؘ੉ఠ ੉޷૑ ӝ߈ ؘ੉ఠ (റ୊ܻ)
   

   View Slide

10. 3ରਗ ҕр ҳࢿਸ ਤೠ ੑ۱ ؘ੉ఠٜ
    Structure from Motion
    

    View Slide

11. ౠ૚੼җ ౠ૚ ӝࣿ੗
    ৔࢚ ౠ૚੼ (Feature) ߂ ౠ૚ ӝࣿ੗ (Descriptor)
    

    View Slide

12. ౠ૚੼੄ ݒட
    ౠ૚੼੄ ݒட җ੿
    

    View Slide

13. ౠ૚੼ ݒட ߂ ୶੸
    ੉য૑ח ੉޷૑ द௫झী ؀ೠ ౠ૚੼ ݒட੄ ୶੸ җ੿
    

    View Slide

14. ҕр ҳࢿ ജ҃ী ؀ೠ Ҋ۰
    झாੌ ߸ച ഥ੹ ߸ച ઑب, ஸ۞ ߸ച
    

    View Slide

15. ౠ૚੼ٜ੄ ݒட Ѿҗ۽ ࠗఠ 3ରਗਵ۽ ҕр ҳࢿ
    3ରਗ ҕр ҳࢿ
    

    View Slide

16. ஠ݫۄٜ р੄ ӝೞ೟੸ ҙ҅ܳ ੉ਊೠ ੗ࣁ ࠁ੿
    ஠ݫۄ ਤ஖/੗ࣁ ࠁ੿
    

    View Slide

17. ҕр ҳࢿ ؘ੉ఠ੄ ҳࢿ ਃࣗ
    3ରਗ ҕр ҳࢿ ߂ ࢚؀੸ੋ ઝ಴۽੄ ୡӝ ҕр ҳࢿ
    RGB
    Segmentation
    Coordinates + feature
    

    View Slide

18. SCM (Spatial Connection Map) ࣗѐ
    3ରਗ ҕр ഛ੢੄ ೙ਃࢿ
    3ରਗ ҕр ҳࢿ ߑध
    ҕр ҳࢿ Ѿҗ੄ ࠁ੿ ࢎ۹ ߂ ѐࢶߑೱ
    ҕр ҳࢿ ؘ੉ఠ੄ ഝਊ
    

    View Slide

19. पઁ ਤ஖৬ ҕр ҳࢿ ؘ੉ఠ р੄ ਤ஖੸ ର੉
    3ରਗਵ۽ ҳࢿػ ҕрٜ੄ ౠ૚
    ҕр A ҕр B
    True position
    

    View Slide

20. ҕр੄ ࠁ੿ ߑध ઺ ೞա
    ҳࢿػ ҕрҗ पઁ ҕрҗ੄ ର੉ ߂ ࠁ੿ೞӝ ਤೠ ߑߨٜ
    Ground Control Point
    Marker
    GCP ࢸ஖
    

    View Slide

21. ب۽ ݃௼ܳ ੉ਊೠ ҕр੄ ࠁ੿
    ۽٘࠭੄ ب۽ উղ ݃௼ ೦ҕ ৔࢚੄ ب۽ ݃௼ ৔৉
    

    View Slide

22. ب۽ ݃௼ܳ ੉ਊೠ ҕр੄ ࠁ੿
    ੿೤ җ੿
    ۽٘࠭ ৔࢚ ೦ҕ ৔࢚
    ҕр ҳࢿ ౟ۑ
    

    View Slide

23. ب۽ ݃௼ܳ ੉ਊೠ ҕр੄ ࠁ੿
    ҕр ҳࢿ ౟ۑ
    ࠁ੿ റ
    

    View Slide

24. ҕр ՙܻ੄ ࠁ੿
    

    View Slide

25. ҕр ҳࢿ ߑध, ࠁ੿ ߑध੄ ѐࢶߑೱ
    Less residual errors More redundancies
    

    View Slide

26. ҕр ҳࢿ ߑध, ࠁ੿ ߑध੄ ѐࢶߑೱ
    Less residual errors More redundancies
    

    View Slide

27. ӝઓ੄ ঌҊ્ܻਸ ೟णӝ߈ ߑधਵ۽ ؀୓ೞח दبٜ
    ҕр ҳࢿ ߑध, ࠁ੿ ߑध੄ ѐࢶߑೱ
    

    View Slide

28. SCM (Spatial Connection Map) ࣗѐ
    3ରਗ ҕр ഛ੢੄ ೙ਃࢿ
    3ରਗ ҕр ҳࢿ ߑध
    ҕр ҳࢿ Ѿҗ੄ ࠁ੿ ࢎ۹ ߂ ѐࢶߑೱ
    ҕр ҳࢿ ؘ੉ఠ੄ ഝਊ
    

    View Slide

29. ҕр ؘ੉ఠ੄ ഝਊ
    ৔࢚ ӝ߈ ਤ஖ ୶੿ ਤ஖ ӝ߈ AR ੗زചػ оҕ ؘ੉ఠ ഝਊ
    

    View Slide

30. ҕр ؘ੉ఠ੄ ഝਊ
    ৔࢚ ӝ߈ ਤ஖ ୶੿ ਤ஖ ӝ߈ AR ੗زചػ оҕ ؘ੉ఠ ഝਊ
    

    View Slide

31. ҕр ؘ੉ఠ੄ ഝਊ
    ৔࢚ ӝ߈ ਤ஖ ୶੿ ਤ஖ ӝ߈ AR ੗زചػ оҕ ؘ੉ఠ ഝਊ
    

    View Slide

32. 3ରਗ ҕр੄ ӝ߈, ӒܻҊ Ӓ ׮਺ਸ ೱ೧
    

    View Slide

33. Q&A
    

    View Slide