物体検出の歴史とM2Detによる最新のアプローチ

Agenda
・DeepLearningを使用した物体検出(Object Detection)の歴史（ほんの一部）
・2019年4 月現在のSOTA(stage of the art. 日本語で最高精度)
・M2Det (A Single-Shot Object Detector based on Multi-Level Feature Pyramid Network. AAAI19)についてkwsk

Transcript

1. ࠓ
   ि
   ͷ
   Θ
   ͔
   Β
   Μ
   ઌ
   ੜ
   ෺ମݕ஌͕
   Θ͔ΒΜ
   1Z%BUB0LJOBXBΦʔΨφΠβʔ
   ΍͢΂͐
   

   View Slide

2. ©)VHLVOJOD
   
   1ZUIPO#FHJOOFSTԭೄΦʔΨφΠβʔ)VHLVO͓ੈ࿩φΠβʔ
   ͪΎΒσʔλגࣜձࣾσʔλΞφϦετ)VHLVO%BUB୅දऔక໾
   1Z$PO۝भJOԭೄ࣮ߦҕһ1Z%BUB0LJOBXBΦʔΨφΠβʔ
   1$΋ങ͑ͳ͍฼ࢠՈఉͰҭͪɺಠֶͰ৽ฉ഑ୡ͠ͳ͕ΒֶඅΛશֹࣗݾෛ୲ͯ͠ϓϩάϥϛϯάΛֶͼɺ
   ෕ͷނڷͰ͋Δ๺ւಓͰήʔϜۀք΁ब৬ɻ
   ΦϦδφϧ੡඼ͷ։ൃʹ௕೥ܞΘΓגࣜձࣾ)VHLVOΛىۀɻ໊ࣾ͸ʮҭΉʯ͔Β໋໊ɻ
   ླ໦߁ݩ :BTVIBSV4V[VLJ
   
   ࣗݾ঺հ
   ͦͷޙ฼ͷނڷͰ͋Δԭೄ΁Ҡॅ͠ɺ*P5ͷ։ൃʹܞΘΔɻ
   ؔ࿈ͯ͠σʔλαΠΤϯεʹڵຯΛ࣋ͪ࢝Ίɺ1Z%BUB0LJOBXB΁௨͍ͳ͕Β1ZUIPO#FHJOOFST
   ԭೄΛൃ଍ɻίϛϡχςΟͰͷֶͼʹώϯτΛಘֶͯੜͱͷίϥϘϨʔγϣϯࣄۀΛ্ཱͪ͛ɺݱࡏ
   Ͱ͸໊΄ͲͷֶੜΤϯδχΞͱऔҾઌىۀ͞·ͱͷίϥϘϨʔγϣϯʹऔΓ૊Ήɻ
   ࠷ۙ͸ͪΎΒσʔλגࣜձࣾͰσʔλΞφϦετͱͯ͠ಇ͖ͭͭɺגࣜձࣾ)VHLVOͰ͸ҰาҾ͍ͨ
   ཱ৔͔Β͓ੈ࿩φΠβʔ ໾৬తʹ͸୅දऔక໾ձ௕
   ͱͯ͠׆ಈ͓ͯ͠Γ·͢ɻ
   झຯ͸ՇɺήʔϜɺษڧձɻ
   ZBTVCFJUXJ
   ZBTVIBSVTV[VLJ
   IUUQTIVHLVODPN
   

   View Slide

3. "HFOEB
   ෺ମೝࣝͷྺ࢙
   ೥݄ݱࡏͷ405"
   ͪΐͬͱLXTL
   

   View Slide

4. ෺ମೝࣝ 0CKFDU%FUFDUJPO
   ͷྺ࢙
   Θ
   ͔
   Β
   Μ
   
   

   View Slide

5. 3$//
   3$//IUUQTQBQFSTOJQTDDQBQFSJNBHFOFUDMBTTJpDBUJPOXJUIEFFQDPOWPMVUJPOBMOFVSBMOFUXPSLTQEG
   'BTU3$//IUUQTBSYJWPSHQEGQEG'BTUFS3$//IUUQQBQFSTOJQTDDQBQFSGBTUFSSDOOUPXBSETSFBMUJNFPCKFDUEFUFDUJPOXJUISFHJPOQSPQPTBMOFUXPSLTQEG
   :0-0IUUQTBSYJWPSHQEGQEG44%IUUQTBSYJWPSHQEGQEG
   .BTL3$//IUUQPQFOBDDFTTUIFDWGDPNDPOUFOU@*$$7@QBQFST)F@.BTL@3$//@*$$7@@QBQFSQEG
   Ҿ༻ݩ
   'BTU3$// 'BTUFS3$//
   %FFQ-FBSOJOHΛ༻͍ͨ
   ෺ମݕ஌ 0CKFDU%FUBUJPO
   ͷྺ࢙ ΄ΜͷҰ෦
   
   :PMP WʙW
   44% .BTL3$//
   

   View Slide

6. Ҿ༻ݩ
   TFDPOET
   'BTUFS3$//WT44%
   0CKFDUEFUFDUJPO(PPHMF$PMBCPSBUPSZIUUQTDPMBCSFTFBSDIHPPHMFDPNHJUIVCUFOTPSqPXIVCCMPCNBTUFSFYBNQMFTDPMBCPCKFDU@EFUFDUJPOJQZOC
   'BTUFS3$// TFDPOET
   44%
   ݩը૾
   

   View Slide

7. ೥݄ݱࡏͷ405"
   Θ
   ͔
   Β
   Μ
   
   

   View Slide

8. 5SFOEJOH3FTFBSDIIUUQTQBQFSTXJUIDPEFDPNTPUBPCKFDUEFUFDUJPOPODPDP
   Ҿ༻ݩ
   .JDSPTPGU$0$0σʔληοτΛ࢖༻ͨ͠
   0CKFDU%FUFDUJPOϥϯΩϯά
   $0$0͸࠷ۙͷ෺ମݕ஌Ͱ͸Α͘࿦จͷதͰҾ༻͞ΕΔσʔληοτɻ
   405"͸೔ʑߋ৽͞Εཚཱঢ়ଶͰ͢ʢ405"Λୡ੒ͨ͠࿦จ͕ա౓ʹ٭ޫΛཋ
   ͼΔ͍ͤʁʣ
   ͪͳΈʹ:0-0W%BSLOFU͸Ґɻ44%͸ϥϯΫ಺ʹ͍ͳ͍ɻ
   

   View Slide

9. .%FUIUUQTBSYJWPSHQEGQEG
   44%IUUQTBSYJWPSHQEGQEG
   4JOHMFTUBHFͷ෺ମೝࣝ405"ͷҰͭ
   .%FU
   Ҿ༻ݩ
   "4JOHMF4IPU0CKFDU%FUFDUPSCBTFEPO.VMUJ-FWFM'FBUVSF1ZSBNJE/FUXPSL """*
   
   44%ͷೝࣝྗෆ଍ͷվળఏҊ
   

   View Slide

10. .%FUIUUQTBSYJWPSHQEGQEG
    .%FUͷੑೳ
    Ҿ༻ݩ
    ੑೳߴ .%FU
    3FUJOB/FU
    44%
    :0-0W
    

    View Slide

11. .%FUΛͪΐͬͱLXTL
    Θ
    ͔
    Β
    Μ
    
    

    View Slide

12. 44%IUUQTBSYJWPSHQEGQEG
    44%ͷ՝୊
    Ҿ༻ݩ
    খ͍͞ը૾ʹ
    ऑ͍
    

    View Slide

13. .%FUIUUQTBSYJWPSHQEGQEG
    .%FUͷΞϓϩʔν
    Ҿ༻ݩ
    γϯϓϧͳ෺ମ େ͖͞ͷҟͳΔ෺ମ ෳࡶͳ෺ମ
    44%Ͱ͸ɺେ͖͞ͷҟͳΔ෺ମ΋ෳࡶ౓ͷҟͳΔ෺ମ΋୯ҰͷϨϕϧʹ
    མͱ͠ࠐΜͰղੳ͠ɺಛ௃ྔͱ͍ͯͨ͠ɻˠೝࣝྗ͕ෆ଍͍ͯͨ͠ɻ
    ɾαΠζʹ8JOEPXαΠζʹӨڹ
    ɾෳࡶ౓ʹଛࣦʹӨڹ
    ͜ͷ໰୊ʹ.VMUJ-FWFM'FBUVSF1ZSBNJE/FUXPSL
    .-'1/
    ʹΑͬͯղܾΛࢼΈΔͷ͕.%FU
    

    View Slide

14. .%FUIUUQTBSYJWPSHQEGQEG
    .-'1/ͷ࢓૊Έ
    
    Ҿ༻ݩ
    #BDLCPOFOFUXPSL ͜ͷྫͰ͸WHH
    ͱ''.Ͱಛ௃
    ྔΛੜ੒͢Δɻ
    

    View Slide

15. .%FUIUUQTBSYJWPSHQEGQEG
    .-'1/ͷ࢓૊Έ
    
    Ҿ༻ݩ
    ෳࡶ౓΁ͷରԠ
    αΠζ΁ͷରԠ
    ''.Wͱෳ਺ͷ56.Ϟδϡʔϧ TIBMMPXʙEFFQ
    Ͱ༷ʑ
    ͳෳࡶ౓͇αΠζͷಛ௃ྔʹม׵͢Δɻ
    

    View Slide

16. .%FUIUUQTBSYJWPSHQEGQEG
    .-'1/ͷ࢓૊Έ
    
    Ҿ༻ݩ
    ༷ʑͳෳࡶ౓͇αΠζͷಛ௃ྔΛ4'".Ͱ.VMUJ-FWFM
    'FBUVSF1ZSBNJEʹ݁߹͢Δɻ
    

    View Slide

17. .%FUIUUQTBSYJWPSHQEGQEG
    .%FUͷΞϓϩʔνͷ݁Ռ
    Ҿ༻ݩ
    ༷ʑͳαΠζɺෳࡶ౓ͷ෺ମ΋ݕ஌
    γϯϓϧͳ෺ମ
    େ͖͞ͷҟͳΔ෺ମ
    ෳࡶͳ෺ମ
    

    View Slide

18. .%FUΛಈ࡞ͤͯ͞ΈΔ
    FOW$6%"όʔδϣϯ֬ೝ
    QZUIPO71ZUIPOόʔδϣϯ֬ೝ
    OWJEJBTNJ/7*%*"ͷυϥΠόɺνοϓͷ֬ೝ
    1Z5PBDIͷμ΢ϯϩʔυͱ࣮ߦ ೖ͍༷ͬͯͨࢠͳͷͰෆཁ͔΋ʁ
    
    XHFUIUUQTEPXOMPBEQZUPSDIPSHXIMDVUPSDIDQDQNMJOVY@Y@XIM
    QZUIPONQJQJOTUBMMUPSDIDQDQNMJOVY@Y@XIM
    QZUIPONQJQJOTUBMMQJQVQHSBEF
    QZUIPONQJQJOTUBMMOVNQZ
    QZUIPONQJQJOTUBMMUPSDIWJTJPO
    QZUIPONQJQJOTUBMMPQFODWQZUIPOUREN
    QZUIPONQJQJOTUBMMDZUIPONBUQMPUMJCBEEJDUUFSNDPMPS
    JNQPSUUPSDI
    QSJOU UPSDIDVEBJT@BWBJMBCMF
    
    1Z5PBDI͕$6%"ʹͳ͍ͬͯΔ͜ͱΛ֬ೝ
    UPSDIDVEBHFU@EFWJDF@OBNF
    (16໊ͷ֬ೝɹl5FTMB5zͳͲ
    .%FUͷϏϧυˍ࣮ߦ
    HJUDMPOFIUUQTHJUIVCDPNRJKJF[IBP.%FUHJU
    DE.%FU
    DINPEYNBLFTI
    NBLFTI
    ͜͜ͰIUUQTESJWFHPPHMFDPNpMFE/.6%E;OX)XJ/%YID1OOEB8KN-WJFX͔Β
    NEFU@WHHQUIΛμ΢ϯϩʔυ͓ͯ͘͠
    QZUIPOEFNPQZDDPOpHTNEFU@WHHQZNNEFU@WHHQUI
    ࣗ෼ͷը૾Λೝ͍ࣝͤͨ࣌͞͸ҎԼͷΑ͏ͳײ͡
    QZUIPOEFNPQZDDPOpHTNEFU@WHHQZNNEFU@WHHQUIGNZ@JNHT
    ͋ͱ͸EFNPQZΛमਖ਼ͯ͠GQTΛը૾ʹॻ͖ࠐΉͳͲࣗ༝ʹ΍Γ·͠ΐ͏
    (PPHMF$PMBCPSBUPSZͰಈ࡞֬ೝࡁΈ
    

    View Slide

19. .%FUͷಈ࡞݁Ռ
    TFDPOET
    .%FU
    

    View Slide

20. .%FUͷֶश࣌ؒ USBJO
    
    #BDLCPOF ೖྗαΠζ %FWJDFT 5SBJOJOHUJNF
    7(( Y 95JUBO9 EBZT
    7(( Y 95JUBO9 EBZT
    3FT/FU Y 95JUBO9 EBZT
    3FT/FU Y 97 EBZT
    7(( Y 97 EBZT
    .%FUIUUQTBSYJWPSHQEGQEG
    Ҿ༻ݩ
    

    View Slide

21. ·ͱΊ
    ෺ମݕ஌ͷྺ࢙ʹֶ͍ͭͯͼ·ͨ͠
    ࠷ۙͷ405"ʹ͍ͭͯ΋ֶͼ·ͨ͠
    .%FUʹ͍ͭͯ΋ֶͼ·ͨ͠ɻ
    ෺ମݕ஌
    Θ͔ͬͨ
    

    View Slide

22. ࠂ஌ʂ
    

    View Slide

23. View Slide

24. " #
    
    Ωʔϊʔτऑ͍ͭͳ͕Γͷڧ͞dླྀେग़਎ͷզʑ͸͍͔ʹͯ͠σʔλαΠΤϯςΟετͱͳͬͨͷ͔d
    େ৓৴ߊ/0#%"5"גࣜձࣾ୅දऔక໾5PLZP3ॳ୅ӡӦGVLVPLB3ӡӦҙࢥܾఆͷͨΊͷσʔλ෼ੳओ࠵1Z%BUB'VLVPLBओ࠵
    
    1ZUIPO8FCϑϨʔϜϫʔΫൺֱ
    .BOBCV5&3"%"1Z$PO+1୅දཧࣄ1ZUIPOΤϯδχΞҭ੒ਪਐڠձ
    ސ໰ཧࣄ
    ԭೄͷίϛϡχςΟ͔Β෼ੳͷ͓࢓ࣄΛ͸͡Ίͨ࿩ͱ
    5FTTFSBDU0$3WFSʹΑΔจࣈೝࣝɾֶशख๏
    ΍͢΂͐1ZUIPO#FHJOOFSTԭೄΦʔΨφΠβʔגࣜձࣾ)VHLVO͓ੈ࿩φΠβʔ
    
    εϥεϥڭ͑ΔɾڭΘΔ1ZUIPO
    4IJOJDIJ/BLBHBXBגࣜձࣾωΫετϕʔε໺ٿΤϯδχΞ݉$50
    1ZUIPOʹ͓͚Δฒྻॲཧϓϩάϥϛϯά
    ਿాխࢠגࣜձࣾ426&&;&ιϑτ΢ΤΞΤϯδχΞ
    
    ϨΨγʔ1ZUIPOࢄࡦ
    ീӢΞφάϥླྀٿେֶ0LJOBXBQN1FSMΤϯδχΞ
    1ZUIPOͰͷ։ൃΛޮ཰తʹਐΊΔͨΊͷπʔϧઃఆ
    খా੾ಞגࣜձࣾΦʔϓϯίϨΫλʔ
    
    l4JNJMBS%JTIz'VODUJPOJO4OBQ%JTI
    1ZUIPOΛ࢖ͬͨྉཧͷҙຯݕࡧ
    ৿Ӭ༤໵ϰΝζݚڀ։ൃΤϯδχΞ౦ژେֶେֶӃ૯߹จԽݚڀՊത࢜՝ఔ
    ࢼߦࡨޡͷͨΊͷ%PDLFS׆༻ज़
    IPUPͪΎΒσʔλגࣜձࣾσʔλΞφϦετ
    
    ΞΠσΞΛখ࢝͘͞Ίͯɺখ͘͞ҭ͍ͯͯ͘ํ๏
    ʙϋοΧιϯͰਂ૚ֶशϞσϧΛ࡞ͬͯӡ༻͢Δ·Ͱ
    5PNPLP'VSVLJϑϦʔϥϯε1ZUIPOσʔλΤϯδχΞ
    ։ൃ؀ڥͷ֞ࠜΛ௒͑Δ-BOHVBHF4FSWFS1SPUPDPMೖ໳
    ٢ాՖय़#F1SPVE8FCΞϓϦέʔγϣϯ։ൃΤϯδχΞ
    
    PythonίϛϡχςΟΛ௨ֶͯ͡Μͩ͜ͱ
    ؔࠜ༟ل - גࣜձࣾSQUEEZE औక໾CTO / PyCon JP 2015 ෭࠲௕
    Pythonͱܕώϯτͱͦͷ࢖͍ํ
    தଜਅਓ - גࣜձࣾψʔϥϘ ίϛϡχέʔγϣϯΞϓϦΤϯδχΞ
    εϐʔΧʔҰཡ
    1Z$PO,ZVTIV
    0LJOBXB
    2019 1Z$PO۝भ
    

    View Slide

25. ·ۭ͖͕ͩ͋Γ·͢ʂ
    1Z$PO۝भ
    

    View Slide

26. 1Z%BUB0LJOBXBY1ZUIPO#FHJOOFSTԭೄ
    ౔
    ླྀٿେֶ
    ߹ಉษڧձ2019
    

    View Slide

27. Speakers
    Retty Inc.
    Software Endineer; Web։ൃ/DWH/ػցֶश1+
    ஛໺ फ़ี (Shunsuke TAKENO)
    ࣾձਓྺ೥໨ͷUP$αʔϏεͰ4PGUXBSF&OHJOFFS΍ͬͯ·͢ʂ
    ੿͍ܦྺͳ͕Β΋ɺେֶࣾձਓͰͷܦݧΛ௨ͨ͠ΩϟϦΞ؍ͱσʔλͱͷ෇͖߹
    ͍ํʹ͍͓ͭͯ࿩Ͱ͖Ε͹ͱࢥ͍·͢ʂ
    ܦྺߴઐˠम࢜ʢ/-1ػց຋༁ʣˠ3FUUZ
    3FUUZͰ͸ʮ༏ઌ౓ֶशʹΑΔਪનจ͔Βͷݟग़͠நग़ʯ
    IUUQTDJOJJBDKQOBJE
    4PGUXBSF%FTJHO΁ͷدߘଞ
    ͦͷଞͷ׆ಈ
    IUUQTTIXDBTF
    

    View Slide

28. Speakers
    SysMLΤϯδχΞ
    ػցֶशϞσϧΛαʔϏεʹ૊ΈࠐΉΠϯϑϥ݉ϛυϧ΢ΣΞΤϯδχΞ
    ͘ʔΉ ͞Μ
    େ޷͖ͩͬͨήʔϜΛ࡞Γ͍ͨͱࢥ͍ɺ͓஡ͷਫঁࢠେֶͷ৘ใՊֶՊʹਐֶɻֶ
    ੜ࣌୅͸ڝٕϓϩάϥϛϯά΍*46$0/Λ͸͡Ί༷ʑͳϓϩάϥϛϯάίϯςε
    τʹ͸·Δɻ
    म࢜ΛऔಘޙήʔϜϓϩάϥϚʔͱͯ͠ब৬͢Δ͕ɺήʔϜ͸࡞Δ΋ͷͰ͸ͳ͘༡
    Ϳ΋ͷͩͬͨͱؾ͖ͮɺσʔλΞφϦετͱͯ͠σʔλ෼ੳͷੈք΁ඈͼࠐΉɻ
    ݱࡏ͸ػցֶशϞσϧΛαʔϏεʹ૊ΈࠐΉΠϯϑϥ݉ϛυϧ΢ΣΞΤϯδχΞ
    4ZT.-ΤϯδχΞ
    Λ͍ͯ͠Δɻ
    UXJUUFS!DPDPESJQT
    #MPHQZ> IUUQDPDPESJQTIBUFCMPKQ
    
    

    View Slide

29. ©)VHLVOJOD
    CONFIDENTIAL
    
    
    ͝ਗ਼ௌ͋Γ͕ͱ͏͍͟͝·ͨ͠(ʆŋωŋ´)ʎ
    !ZBTVCFJUXJ
    ZBTVIBSVTV[VLJ
    IUUQTIVHLVODPN
    ← ྑ͔ͬͨΒ͓༑ୡʹ
    ͳΓ·͠ΐ͏ʙ
    

    View Slide