Upgrade to Pro — share decks privately, control downloads, hide ads and more …

メルカリにおける写真検索機能

KosukeArase
October 25, 2019

 メルカリにおける写真検索機能

2019/10/25 に開催された,Bonfire Data & Science #1 にてメルカリの写真検索 (画像検索) 機能についてお話した際の資料です!
モデリングから運用,そして写真検索機能はどのように進化していくかについて,メルカリが写真検索に関連して発表した2本の論文を軸にご紹介しています.

KosukeArase

October 25, 2019
Tweet

More Decks by KosukeArase

Other Decks in Technology

Transcript

  1.  ࣗݾ঺հ  ߥ੉ߊհ ,PTVLF"SBTF  w "*&OHJOFFSJOH5FBNΤϯδχΞ w ౦ژେֶେֶӃݪాݚڀࣨଔ

    w ೥݄d೥݄Πϯλʔϯ w ೥݄৽ଔೖࣾ w ೥݄dࣸਅݕࡧϓϩδΣΫτ 5FDI-FBE  w ઐ໳ը૾ೝࣝɼ࣍ݩ఺܈ೝࣝ w ग़඼࣌ͷը૾ೝࣝػೳࣸਅݕࡧػೳ w 5XJUUFS (JU)VC!,PTVLF"SBTF
  2.  8IBUJTࣸਅݕࡧ w ࣸਅݕࡧͷϞσϦϯάͱγεςϜʹؔ࿈ͯ͠ܭຊͷ࿦จΛൃද w 5BLVNB:BNBHVDIJ ,PTVLF"SBTF 3JLV5PHBTIJ 4IVOZB6FUB 


    $MPTJOHUIF(BQ#FUXFFO2VFSZBOE%BUBCBTF
 UISPVHI2VFSZ'FBUVSF5SBOTGPSNBUJPOJO$$F$PNNFSDF7JTVBM4FBSDI 
 5IF4*(*38PSLTIPQ0OF$PNNFSDF 4*(*3F$PN`  w ࢁޱ୓ਅɼதՏ޺จɼઍ༿ཽհɼߥ੉ߊհɼ
 $$ϚʔέοτϓϨΠεʹ͓͚ΔϏδϡΞϧݕࡧγεςϜɼ
 ୈճը૾ͷೝࣝɾཧղγϯϙδ΢Ϝ .*36 ɼ w ·্ͣͷຊͷ࿦จΛ঺հ͢ΔܗͰϝϧΧϦͷࣸਅݕࡧٕज़ʹ͍ͭͯ࿩͠ɼ
 ͦͷޙࠓޙͷల๬ʹ͍͓ͭͯ࿩͠͠·͢ɽ
  3. ໰୊఺  w $$F$PNNFSDFͰ͸ɼग़඼ऀ΋ߪೖऀ΋Ұൠফඅऀ w ଟ͘ͷ৔߹ɼ঎඼͸চ΍ςʔϒϧ্ͰࡱӨ͞ΕΔ w ҰํɼΫΤϦʹ͸ண༻ը૾͕ଟ͍͕ɼ
 ͦͷ৔߹ண༻ը૾͕ݕࡧ͞Ε΍͍͢ w

    ͜ͷΑ͏ͳݕࡧ݁Ռ͸
 #$F$PNNFSDFΛ࿈૝ͤ͞ɼ
 ग़඼ऀͷग़඼ҙཉʹѱӨڹΛ
 ٴ΅͢Մೳੑ͕͋Δ<)BHJV > ")BHJVFUBM l/FUXPSL&GGFDUT"SFO`U&OPVHIz 
 )BSWBSE#VTJOFTT3FWJFX 
  4. ಛ௃நग़ث w .PCJMF/FUW w ΤοδσόΠεͰͷॲཧΛݟਾ͑ͯͷϞσϧબ୒ w ࣝผ໰୊ͱֶͯ͠श w (MPCBM"WFSBHF1PPMJOHͷग़ྗ 

    E Λ
 -ਖ਼نԽͨ͠΋ͷΛಛ௃ϕΫτϧͱͯ͠ར༻ w σʔληοτ w ໿ඦສը૾ɼ໿ Ϋϥε w ϒϥϯυɼ໛༷ɼΧςΰϦͷ૊Έ߹Θͤ FHʮφΠΩετϥΠϓΰϧϑϙϩγϟπʯ   ʮ༡ٔԦτϨʔσΟϯάΧʔυʯ w ֶश݁Ռ w "DDVSBDZ5PQ 5PQ  ඇෛͷཁૉͰߏ੒͞ΕΔϕΫτϧ
  5. ·ͱΊ  w $$F$PNNFSDFಛ༗ͷը૾ݕࡧͰͷ՝୊ʹର͢ΔऔΓ૊Έ w ݁Ռʹண༻ը૾͕ଟؚ͘·ΕΔͱग़඼ʹ΋ӨڹΛٴ΅͢Մೳੑ͕͋Δ w ΫΤϦը૾ͷಛ௃͔Βlண༻zͷಛ௃ΛऑΊΔಛ௃ม׵ΛఏҊ w ண༻ը૾ͷΫΤϦʹରͯ͠ݕࡧਫ਼౓ͷେ෯ͳվળΛ֬ೝ

    w ඇண༻ը૾ʹ͍ͭͯ΋ѱӨڹ͸ݟΒΕͣɼఏҊख๏ͷ༗ޮੑΛ֬ೝ w ΫΤϦ΁ͷޙॲཧͷΈͷૢ࡞Ͱ͋ΔͨΊɼܰྔ͔ͭมߋ͕༰қ w ࠓޙͷ՝୊ɿఏҊͨ͠ಛ௃ม׵ͷ༗ޮੑʹ͍ͭͯͷཧ࿦తઆ໌
  6. w %PDLFS w ίϯςφ؀ڥ 04ϨϕϧͷԾ૝Խ؀ڥ Λఏڙ͢Δϛυϧ΢ΣΞ w ҟͳΔ؀ڥͰૉૣ͘ΞϓϦέʔγϣϯΛಈ࡞Մೳ w ӡ༻ίετͷ௿ݮ΍γεςϜͷ҆ఆԽ

    w ,VCFSOFUFT LT  w ෳ਺ͷίϯςφͷσϓϩΠɼεέʔϦϯάɼ؅ཧΛߦ͏ͨΊͷ
 ίϯςφΦʔέετϨʔγϣϯγεςϜ w $VTUPN3FTPVSDF%FGJOJUJPO $3% ͱݺ͹ΕΔಠࣗͷϦιʔεΛఆٛͰ͖Δػೳ͕͋Γɺ
 ։ൃऀ͸ͦͷػೳΛհͯ͠LTͷػೳΛ֦ுͰ͖Δ w "84 ($1ͷϚϧνΫϥ΢υߏ੒Λ࠾༻ USBJOJOH&,4 TFSWJOH(,&  %PDLFSBOE,VCFSOFUFT
  7.  5SBJOJOHɾϦιʔεͷ࡞੒ w )PVSMZ %BJMZ .POUIMZόον͕ଘࡏ w 5SBJOJOHDVTUPNSFTPVSDFΛ
 $SPO+PC͕࡞੒ w

    $VTUPNDPOUSPMMFS͕
 DVTUPNSFTPVSDFͰઃఆ͞Εͨ
 ίϯςφϕʔεύΠϓϥΠϯΛ࣮ߦ
  8.  ϝϧΧϦʹ͓͚ΔϏδϡΞϧݕࡧγεςϜ·ͱΊ w ίϯςφϕʔεͷ࠶ݱੑͷߴ͍γεςϜ w ,VCFSOFUFTͷ$3%ΧελϜίϯτϩʔϥ΍αʔϏεσΟεΧόϦ౳Λ׆༻ w ಺੡ͷ.-1MBUGPSN -ZLFJPO Ͱ࣮ݱ͞Ε͍ͯΔػೳΛར༻͠ɺ


    ίϯςφϕʔεύΠϓϥΠϯ౳ϩόετͳγεςϜΛߏங w Ϋϥ΢υΠϯϑϥΛ,VCFSOFUFTͰந৅Խ͢ΔࣄʹΑͬͯɺϚϧνΫϥ΢υΛ ҙࣝ͢Δ͜ͱͳ͘ӡ༻Մೳ
  9. w ༷ʑͳτϨʔυΦϑ໰୊͕ଘࡏ͢Δ w "DDVSBDZ w -BUFODZ w &OFSHZDPOTVNQUJPO w .PEFMTJ[F

    w ໨తͷ69Λୡ੒͢ΔͨΊʹɺ
 ΞϧΰϦζϜɺΤϯδχΞϦϯά྆ํͰ ͦΕΒͷόϥϯεΛߟྀ͢Δඞཁ͕͋Δ 8IBUNVTUIBQQFOUPNBLF%//XPSLPOFEHF ΦϖϨʔγϣϯʹΑͬͯίετ͕ҧ͏ NPCJMFEFWJDFͰαϙʔτ͍ͯ͠Δ(16ΠϯλʔϑΣʔεͷγΣΞ
  10. 4FSWFS TJEF $MJFOU TJEF w αʔόଆͷ%//GSBNFXPSLʹ͸ 5FOTPS'MPX4FSWJOHΛ࢖༻ w ΫϥΠΞϯτଆͰ͸5FOTPS'MPX -JUF

    .FEJB1JQFΛ࢖༻ w .FEJB1JQFΛ࢖༻͢Δ͜ͱͰલॲ ཧ΍ޙॲཧ΋4*.%౳Λ࢖༻ͯ͠ ޮ཰ԽͰ͖Δ 5' -JUF 0QUJPOBM &EHFGVODUJPOBSDIJUFDUVSF