物体検出の歴史とM2Detによる最新のアプローチ

Agenda
・DeepLearningを使用した物体検出(Object Detection)の歴史（ほんの一部）
・2019年4 月現在のSOTA(stage of the art. 日本語で最高精度)
・M2Det (A Single-Shot Object Detector based on Multi-Level Feature Pyramid Network. AAAI19)についてkwsk

Transcript

1. ࠓ ि ͷ Θ ͔ Β Μ ઌ ੜ ෺ମݕ஌
   ͕ Θ͔ΒΜ 1Z%BUB0LJOBXB
   ΦʔΨφΠβʔ
   ΍͢΂͐
2. ©
   
   )VHLVO
   JOD
    1ZUIPO#FHJOOFSTԭೄΦʔΨφΠβʔ
   
   )VHLVO͓ੈ࿩φΠβʔ
   ͪΎΒσʔλגࣜձࣾσʔλΞφϦετ
   
   )VHLVO
   %BUB
   ୅දऔక໾
   1Z$PO۝भ
   JO
   ԭೄ࣮ߦҕһ
   
   1Z%BUB0LJOBXBΦʔΨφΠβʔ 1$΋ങ͑ͳ͍฼ࢠՈఉͰҭͪɺಠֶͰ৽ฉ഑ୡ͠ͳ͕ΒֶඅΛશֹࣗݾෛ୲ͯ͠ϓϩάϥϛϯάΛֶͼɺ ෕ͷނڷͰ͋Δ๺ւಓͰήʔϜۀք΁ब৬ɻ
   ΦϦδφϧ੡඼ͷ։ൃʹ௕೥ܞΘΓגࣜձࣾ)VHLVOΛىۀɻ໊ࣾ͸ʮҭΉʯ͔Β໋໊ɻ ླ໦
   ߁ݩ
   :BTVIBSV
   4V[VLJ ࣗݾ঺հ ͦͷޙ฼ͷނڷͰ͋Δԭೄ΁Ҡॅ͠ɺ*P5ͷ։ൃʹܞΘΔɻ
   ؔ࿈ͯ͠σʔλαΠΤϯεʹڵຯΛ࣋ͪ࢝Ίɺ1Z%BUB0LJOBXB΁௨͍ͳ͕Β1ZUIPO#FHJOOFST ԭೄΛൃ଍ɻίϛϡχςΟͰͷֶͼʹώϯτΛಘֶͯੜͱͷίϥϘϨʔγϣϯࣄۀΛ্ཱͪ͛ɺݱࡏ Ͱ͸໊΄ͲͷֶੜΤϯδχΞͱऔҾઌىۀ͞·ͱͷίϥϘϨʔγϣϯʹऔΓ૊Ήɻ
   ࠷ۙ͸ͪΎΒσʔλגࣜձࣾͰσʔλΞφϦετͱͯ͠ಇ͖ͭͭɺגࣜձࣾ)VHLVOͰ͸ҰาҾ͍ͨ ཱ৔͔Β͓ੈ࿩φΠβʔ ໾৬తʹ͸୅දऔక໾ձ௕ ͱͯ͠׆ಈ͓ͯ͠Γ·͢ɻ
   झຯ͸ՇɺήʔϜɺษڧձɻ ZBTVCFJUXJ ZBTVIBSVTV[VLJ
   IUUQTIVHLVODPN
   
3. "HFOEB  ෺ମೝࣝͷྺ࢙
    ೥݄ݱࡏͷ405"
   
   ͪΐͬͱLXTL
4. ෺ମೝࣝ 0CKFDU
   %FUFDUJPO ͷྺ࢙ Θ ͔ Β Μ 
5. 3$// 3$//
   IUUQTQBQFSTOJQTDDQBQFSJNBHFOFUDMBTTJpDBUJPOXJUIEFFQDPOWPMVUJPOBMOFVSBMOFUXPSLTQEG
   'BTU
   3$//
   IUUQTBSYJWPSHQEGQEG
   
   
   
   'BTUFS
   3$//
   IUUQQBQFSTOJQTDDQBQFSGBTUFSSDOOUPXBSETSFBMUJNFPCKFDUEFUFDUJPOXJUISFHJPOQSPQPTBMOFUXPSLTQEG
   :0-0
   
   
   IUUQTBSYJWPSHQEGQEG
   
   
   
   
   
   44%
   IUUQTBSYJWPSHQEGQEG
   .BTL
   3$//
   
   
   IUUQPQFOBDDFTTUIFDWGDPNDPOUFOU@*$$7@QBQFST)F@.BTL@3$//@*$$7@@QBQFSQEG Ҿ༻ݩ 'BTU
   3$// 'BTUFS
   3$// %FFQ-FBSOJOHΛ༻͍ͨ
   ෺ମݕ஌ 0CKFDU
   %FUBUJPO ͷྺ࢙
   ΄ΜͷҰ෦ :PMP
   WʙW 44% .BTL
   3$//
6. Ҿ༻ݩ 
   TFDPOET 'BTUFS
   3$//
   WT
   44% 0CKFDU
   EFUFDUJPO
   
   (PPHMF
   $PMBCPSBUPSZ
   
   
   IUUQTDPMBCSFTFBSDIHPPHMFDPNHJUIVCUFOTPSqPXIVCCMPCNBTUFSFYBNQMFTDPMBCPCKFDU@EFUFDUJPOJQZOC 'BTUFS
   3$// 
   TFDPOET 44% ݩը૾
7. 
   ೥݄ݱࡏͷ405" Θ ͔ Β Μ 
8. 5SFOEJOH
   3FTFBSDI
   
   
   IUUQTQBQFSTXJUIDPEFDPNTPUBPCKFDUEFUFDUJPOPODPDP Ҿ༻ݩ .JDSPTPGU
   $0$0
   σʔληοτΛ࢖༻ͨ͠
   0CKFDU
   %FUFDUJPOϥϯΩϯά $0$0͸࠷ۙͷ෺ମݕ஌Ͱ͸Α͘࿦จͷதͰҾ༻͞ΕΔσʔληοτɻ
   405"͸೔ʑߋ৽͞Εཚཱঢ়ଶͰ͢ʢ405"Λୡ੒ͨ͠࿦จ͕ա౓ʹ٭ޫΛཋ ͼΔ͍ͤʁʣ
   ͪͳΈʹ:0-0W %BSLOFU͸Ґɻ44%͸ϥϯΫ಺ʹ͍ͳ͍ɻ
9. .%FU
   
   
   IUUQTBSYJWPSHQEGQEG
   44%
   
   IUUQTBSYJWPSHQEGQEG 4JOHMF
   TUBHFͷ෺ମೝࣝ405"ͷҰͭ
   .%FU Ҿ༻ݩ "
   4JOHMF4IPU
   0CKFDU
   %FUFDUPS
   CBTFE
   PO
   .VMUJ-FWFM
   'FBUVSF
   1ZSBNJE
   /FUXPSL
   """* 44%ͷೝࣝྗෆ଍ͷվળఏҊ
10. .%FU
    
    
    IUUQTBSYJWPSHQEGQEG .%FUͷੑೳ Ҿ༻ݩ ੑೳߴ .%FU 3FUJOB/FU 44% :0-0W
11. 
    .%FUΛͪΐͬͱLXTL Θ ͔ Β Μ 
12. 
    44%
    IUUQTBSYJWPSHQEGQEG 44%ͷ՝୊ Ҿ༻ݩ খ͍͞ը૾ʹ
    ऑ͍
13. 
    .%FU
    
    
    IUUQTBSYJWPSHQEGQEG
    .%FUͷΞϓϩʔν Ҿ༻ݩ γϯϓϧͳ෺ମ େ͖͞ͷҟͳΔ෺ମ ෳࡶͳ෺ମ 44%Ͱ͸ɺେ͖͞ͷҟͳΔ෺ମ΋ෳࡶ౓ͷҟͳΔ෺ମ΋୯ҰͷϨϕϧʹ
    མͱ͠ࠐΜͰղੳ͠ɺಛ௃ྔͱ͍ͯͨ͠ɻˠೝࣝྗ͕ෆ଍͍ͯͨ͠ɻ
    ɾαΠζʹ8JOEPXαΠζʹӨڹ
    ɾෳࡶ౓ʹଛࣦʹӨڹ ͜ͷ໰୊ʹ.VMUJ-FWFM
    'FBUVSF
    1ZSBNJE
    /FUXPSL
    .-'1/ ʹΑͬͯղܾΛࢼΈΔͷ͕.%FU
14. 
    .%FU
    
    
    IUUQTBSYJWPSHQEGQEG
    .-'1/ͷ࢓૊Έ  Ҿ༻ݩ #BDLCPOF
    OFUXPSL ͜ͷྫͰ͸WHH ͱ''.Ͱಛ௃ ྔΛੜ੒͢Δɻ
15. 
    .%FU
    
    
    IUUQTBSYJWPSHQEGQEG
    .-'1/ͷ࢓૊Έ  Ҿ༻ݩ ෳࡶ౓΁ͷରԠ αΠζ΁ͷରԠ ''.Wͱෳ਺ͷ56.Ϟδϡʔϧ TIBMMPXʙEFFQ Ͱ༷ʑ ͳෳࡶ౓͇αΠζͷಛ௃ྔʹม׵͢Δɻ
16. 
    .%FU
    
    
    IUUQTBSYJWPSHQEGQEG
    .-'1/ͷ࢓૊Έ  Ҿ༻ݩ ༷ʑͳෳࡶ౓͇αΠζͷಛ௃ྔΛ4'".Ͱ.VMUJ-FWFM
    'FBUVSF
    1ZSBNJEʹ݁߹͢Δɻ
17. 
    .%FU
    
    
    IUUQTBSYJWPSHQEGQEG
    .%FUͷΞϓϩʔνͷ݁Ռ Ҿ༻ݩ ༷ʑͳαΠζɺෳࡶ౓ͷ෺ମ΋ݕ஌ γϯϓϧͳ෺ମ େ͖͞ͷҟͳΔ෺ମ ෳࡶͳ෺ମ
18. .%FUΛಈ࡞ͤͯ͞ΈΔ FOW
    
    
    $6%"όʔδϣϯ֬ೝ
    QZUIPO
    7
    
    1ZUIPOόʔδϣϯ֬ೝ
    OWJEJBTNJ
    
    /7*%*"ͷυϥΠόɺνοϓͷ֬ೝ
    
    1Z5PBDI
    ͷμ΢ϯϩʔυͱ࣮ߦ ೖ͍༷ͬͯͨࢠͳͷͰෆཁ͔΋ʁ
    XHFU
    IUUQTEPXOMPBEQZUPSDIPSHXIMDVUPSDIDQDQNMJOVY@Y@XIM
    
    QZUIPO
    N
    QJQ
    JOTUBMM
    UPSDIDQDQNMJOVY@Y@XIM
    QZUIPO
    N
    QJQ
    JOTUBMM
    QJQ
    VQHSBEF
    QZUIPO
    N
    QJQ
    JOTUBMM
    OVNQZ
    QZUIPO
    N
    QJQ
    JOTUBMM
    UPSDIWJTJPO
    QZUIPO
    N
    QJQ
    JOTUBMM
    PQFODWQZUIPO
    UREN
    QZUIPO
    N
    QJQ
    JOTUBMM
    DZUIPO
    NBUQMPUMJC
    BEEJDU
    UFSNDPMPS
    JNQPSU
    UPSDI
    QSJOU UPSDIDVEBJT@BWBJMBCMF
    
    
    1Z5PBDI͕$6%"ʹͳ͍ͬͯΔ͜ͱΛ֬ೝ
    UPSDIDVEBHFU@EFWJDF@OBNF 
    
    
    (16໊ͷ֬ೝɹl5FTMB
    5zͳͲ
    
    .%FUͷϏϧυˍ࣮ߦ
    HJU
    DMPOF
    IUUQTHJUIVCDPNRJKJF[IBP.%FUHJU
    DE
    .%FU
    DINPE
    Y
    NBLFTI
    NBLFTI
    
    ͜͜ͰIUUQTESJWFHPPHMFDPNpMFE/.6%E;OX)XJ/%YID1OOEB8KN-WJFX
    ͔Β
    
    NEFU@WHHQUIΛμ΢ϯϩʔυ͓ͯ͘͠
    QZUIPO
    EFNPQZ
    DDPOpHTNEFU@WHHQZ
    NNEFU@WHHQUI
    
    ࣗ෼ͷը૾Λೝ͍ࣝͤͨ࣌͞͸ҎԼͷΑ͏ͳײ͡
    QZUIPO
    EFNPQZ
    DDPOpHTNEFU@WHHQZ
    NNEFU@WHHQUI
    G
    NZ@JNHT
    
    ͋ͱ͸EFNPQZΛमਖ਼ͯ͠GQTΛը૾ʹॻ͖ࠐΉͳͲࣗ༝ʹ΍Γ·͠ΐ͏ (PPHMF
    $PMBCPSBUPSZͰಈ࡞֬ೝࡁΈ
19. .%FUͷಈ࡞݁Ռ 
    TFDPOET .%FU
20. .%FUͷֶश࣌ؒ USBJO #BDLCPOF ೖྗαΠζ %FWJDFT 5SBJOJOH
    UJNF  7(( Y 9
    5JUBO9 EBZT  7(( Y 9
    5JUBO9 EBZT  3FT/FU
     Y 9
    5JUBO9 EBZT  3FT/FU
     Y 9
    7 EBZT  7(( Y 9
    7 EBZT
    .%FU
    
    
    IUUQTBSYJWPSHQEGQEG
    Ҿ༻ݩ
21. ·ͱΊ ෺ମݕ஌ͷྺ࢙ʹֶ͍ͭͯͼ·ͨ͠ ࠷ۙͷ405"ʹ͍ͭͯ΋ֶͼ·ͨ͠ .%FUʹ͍ͭͯ΋ֶͼ·ͨ͠ɻ ෺ମݕ஌ Θ͔ͬͨ
22. ࠂ஌ʂ
24. " # 
    
     Ωʔϊʔτ
    ऑ͍ͭͳ͕Γͷڧ͞
    
    d
    ླྀେग़਎ͷզʑ͸͍͔ʹͯ͠σʔλαΠΤϯςΟετͱͳͬͨͷ͔
    d
    େ৓
    ৴ߊ
    
    /0#
    %"5"גࣜձࣾ
    ୅දऔక໾
    
    5PLZP3
    ॳ୅ӡӦ
    
    GVLVPLB3
    ӡӦ
    
    ҙࢥܾఆͷͨΊͷσʔλ෼ੳ
    ओ࠵
    
    1Z%BUB'VLVPLB
    ओ࠵ 
    
     1ZUIPO
    8FCϑϨʔϜϫʔΫൺֱ
    .BOBCV
    5&3"%"
    
    1Z$PO
    +1୅දཧࣄ
    
    1ZUIPOΤϯδχΞҭ੒ਪਐڠձ
    ސ໰ཧࣄ ԭೄͷίϛϡχςΟ͔Β෼ੳͷ͓࢓ࣄΛ͸͡Ίͨ࿩ͱ
    5FTTFSBDU0$3
    WFSʹΑΔจࣈೝࣝɾֶशख๏
    ΍͢΂͐
    
    1ZUIPO#FHJOOFSTԭೄΦʔΨφΠβʔ
    
    גࣜձࣾ)VHLVO
    ͓ੈ࿩φΠβʔ 
    
     εϥεϥڭ͑ΔɾڭΘΔ1ZUIPO
    4IJOJDIJ
    /BLBHBXB
    
    גࣜձࣾωΫετϕʔε໺ٿΤϯδχΞ݉$50 1ZUIPOʹ͓͚Δฒྻॲཧϓϩάϥϛϯά
    ਿా
    խࢠ
    
    גࣜձࣾ426&&;&
    ιϑτ΢ΤΞΤϯδχΞ 
    
     ϨΨγʔ1ZUIPOࢄࡦ
    ീӢ
    Ξφάϥ
    
    ླྀٿେֶ
    0LJOBXBQN
    1FSMΤϯδχΞ 1ZUIPOͰͷ։ൃΛޮ཰తʹਐΊΔͨΊͷπʔϧઃఆ
    খా੾ಞ
    
    גࣜձࣾΦʔϓϯίϨΫλʔ 
    
     l4JNJMBS%JTIz
    'VODUJPO
    JO
    4OBQ%JTI
    
    
    1ZUIPOΛ࢖ͬͨྉཧͷҙຯݕࡧ
    
    ৿Ӭ༤໵
    
    ϰΝζݚڀ։ൃΤϯδχΞ
    
    ౦ژେֶେֶӃ૯߹จԽݚڀՊത࢜՝ఔ ࢼߦࡨޡͷͨΊͷ
    %PDLFS
    ׆༻ज़
    IPUP
    
    ͪΎΒσʔλגࣜձࣾ
    σʔλΞφϦετ 
    
     ΞΠσΞΛখ࢝͘͞Ίͯɺখ͘͞ҭ͍ͯͯ͘ํ๏
    ʙ
    ϋοΧιϯͰਂ૚ֶशϞσϧΛ࡞ͬͯӡ༻͢Δ·Ͱ
    5PNPLP
    'VSVLJ
    
    ϑϦʔϥϯε
    1ZUIPOσʔλΤϯδχΞ ։ൃ؀ڥͷ֞ࠜΛ௒͑Δ-BOHVBHF
    4FSWFS
    1SPUPDPMೖ໳
    ٢ా
    Ֆय़
    
    #F1SPVE
    8FCΞϓϦέʔγϣϯ։ൃΤϯδχΞ 
    
     PythonίϛϡχςΟΛ௨ֶͯ͡Μͩ͜ͱ ؔࠜ༟ل - גࣜձࣾSQUEEZE औక໾CTO / PyCon JP 2015 ෭࠲௕ Pythonͱܕώϯτͱͦͷ࢖͍ํ தଜਅਓ - גࣜձࣾψʔϥϘ ίϛϡχέʔγϣϯΞϓϦΤϯδχΞ εϐʔΧʔ
    Ұཡ 1Z$PO
    ,ZVTIV
    0LJOBXB 2019 1Z$PO۝भ
25. ·ۭ͖͕ͩ͋Γ·͢ʂ 1Z$PO۝भ
26. 1Z%BUB0LJOBXB
    Y
    1ZUIPO#FHJOOFSTԭೄ  ౔
    ླྀٿେֶ ߹ಉษڧձ2019
27. Speakers Retty Inc. Software Endineer; Web։ൃ/DWH/ػցֶश1+ ஛໺ फ़ี (Shunsuke TAKENO) ࣾձਓྺ
    ೥໨ͷ
    UP$αʔϏεͰ4PGUXBSF
    &OHJOFFS΍ͬͯ·͢ʂ
    ੿͍ܦྺͳ͕Β΋ɺେֶࣾձਓͰͷܦݧΛ௨ͨ͠ΩϟϦΞ؍ͱσʔλͱͷ෇͖߹ ͍ํʹ͍͓ͭͯ࿩Ͱ͖Ε͹ͱࢥ͍·͢ʂ
    ܦྺ
    ߴઐ
    ˠ
    म࢜ʢ/-1
    ػց຋༁ʣˠ
    3FUUZ
    3FUUZͰ͸ʮ༏ઌ౓ֶशʹΑΔਪનจ͔Βͷݟग़͠நग़ʯ
    IUUQTDJOJJBDKQOBJE
    4PGUXBSF
    %FTJHO΁ͷدߘଞ
    ͦͷଞͷ׆ಈ
    IUUQTTIXDBTF
28. Speakers SysMLΤϯδχΞ ػցֶशϞσϧΛαʔϏεʹ૊ΈࠐΉΠϯϑϥ݉ϛυϧ΢ΣΞΤϯδχΞ ͘ʔΉ ͞Μ େ޷͖ͩͬͨήʔϜΛ࡞Γ͍ͨͱࢥ͍ɺ͓஡ͷਫঁࢠେֶͷ৘ใՊֶՊʹਐֶɻֶ ੜ࣌୅͸ڝٕϓϩάϥϛϯά΍*46$0/Λ͸͡Ί༷ʑͳϓϩάϥϛϯάίϯςε τʹ͸·Δɻ
    म࢜ΛऔಘޙήʔϜϓϩάϥϚʔͱͯ͠ब৬͢Δ͕ɺήʔϜ͸࡞Δ΋ͷͰ͸ͳ͘༡ Ϳ΋ͷͩͬͨͱؾ͖ͮɺσʔλΞφϦετͱͯ͠σʔλ෼ੳͷੈք΁ඈͼࠐΉɻ
    ݱࡏ͸ػցֶशϞσϧΛαʔϏεʹ૊ΈࠐΉΠϯϑϥ݉ϛυϧ΢ΣΞΤϯδχΞ 4ZT.-ΤϯδχΞ Λ͍ͯ͠Δɻ
    UXJUUFS
    !DPDPESJQT
    #MPH
    <ͽΑͽΑQZ> IUUQDPDPESJQTIBUFCMPKQ
    
29. ©
    
    )VHLVO
    JOD CONFIDENTIAL
     ͝ਗ਼ௌ͋Γ͕ͱ͏͍͟͝·ͨ͠(ʆŋωŋ´)ʎ !ZBTVCFJUXJ ZBTVIBSVTV[VLJ
    IUUQTIVHLVODPN
    ← ྑ͔ͬͨΒ͓༑ୡʹ ͳΓ·͠ΐ͏ʙ