Upgrade to Pro — share decks privately, control downloads, hide ads and more …

ハンドメイド作品を対象としたECサイトにおける大量生産品の検出 / Detection of Mass-produced Goods at EC Site to Trade Handmade Goods

ハンドメイド作品を対象としたECサイトにおける大量生産品の検出 / Detection of Mass-produced Goods at EC Site to Trade Handmade Goods

財津大夏*, 三宅悠介**, 松本亮介**
*GMOペパボ株式会社 技術部 デザイン戦略チーム / **GMOペパボ株式会社 ペパボ研究所
2018.05.17 第41回 情報処理学会 インターネットと運用技術研究会

Hiroka Zaitsu

May 17, 2018
Tweet

More Decks by Hiroka Zaitsu

Other Decks in Technology

Transcript

  1. ࡒ௡େՆ*, ࡾ୐༔հ**, দຊ྄հ** *GMOϖύϘגࣜձࣾ ٕज़෦ σβΠϯઓུνʔϜ / **GMOϖύϘגࣜձࣾ ϖύϘݚڀॴ 2018.05.17

    ୈ41ճ ৘ใॲཧֶձ Πϯλʔωοτͱӡ༻ٕज़ݚڀձ ϋϯυϝΠυ࡞඼Λର৅ͱͨ͠ ECαΠτʹ͓͚Δେྔੜ࢈඼ͷݕग़
  2. • N-GramτʔΫϯʹΑͬͯจࣈ୯Ґͷڞىؔ܎Λಛ௃ྔͱͯ͠ѻ͏ • ୯७ϕΠζ෼ྨثʹΑͬͯτʔΫϯͷಉ࣌ൃੜ֬཰ΛϞσϧʹ૊ΈࠐΉ • ෼ྨثͱͯ͠͸ݹయత • ςετσʔλʹ͓͍ͯे෼ͳਫ਼౓Λࣔ͢ • 1೔෼ͷొ࿥࡞඼ͷ෼ྨʹֻ͔Δ͕࣌ؒ100msఔ౓ͱߴ଎Ͱ͋Δ

    • ͜Ε·ͰػցԽ͞Εͯ͜ͳ͔ͬͨͨΊӡ༻ʹҠ͢ࡍͷ؆ศ͞Λߟྀ • τʔΫϯͷ࣍਺ͷ૊Έ߹ΘͤʹΑͬͯ৘ใྔΛ૿΍͠ਫ਼౓Λ্͛Δ 23 ख๏1 ΞΧ΢ϯτ໊Λ༻͍Δ෼ྨثʹΑΔݕग़
  3. • MacBook Pro (Retina, 13-inch, Early 2015) • CPU: 3.1GHz

    Intel Core i7 • RAM: 16GB 1,867MHz DDR3 • Python 3.6.0 • scikit-learn 0.19.1 • ngram 3.3.2 • Mecab 0.996 29 ࣮ݧ؀ڥ
  4. • ೖྗͨ͠ग़඼ऀͷΞΧ΢ϯτ਺͸
 େྔੜ࢈඼181 / ϋϯυϝΠυ࡞඼326 • ϋϯυϝΠυ࡞඼ͷग़඼ऀͷ1-GramτʔΫϯ͸
 ೔ຊޠͷ฼ԻͰ͋Δa,i,e,oͷ౓਺͕ߴ͘
 ਺ࣈ΍೔ຊޠͷࢠԻʹݱΕͳ͍q,v,x,zͷ౓਺͕௿͍ •

    1-GramτʔΫϯͱ2-GramτʔΫϯͷ
 ૊Έ߹ΘͤΛಛ௃ྔͱͯ͠༻͍Δ 31 ΞΧ΢ϯτ໊Λ༻͍Δ෼ྨثͷධՁ ϋϯυϝΠυ࡞඼ͷग़඼ऀ େྔੜ࢈඼ͷग़඼ऀ ΞΧ΢ϯτ໊ͷ(SBNτʔΫϯͷ෼෍
  5. • ෼ྨثͷߏஙʹ༻͍͍ͯͳ͍ະ஌ͷσʔλ544ݸΛ෼ྨثʹద༻ • 70ݸ (12.9%) Λେྔੜ࢈඼ͷग़඼ऀͱ෼ྨ • ෼ྨ݁ՌΛӡӦऀ͕໨ࢹͯ͠17ݸ (24.3%) ͕େྔੜ࢈඼ͷग़඼ऀͩͬͨ

    • େྔੜ࢈඼ͷग़඼ऀͱ෼ྨ͞Εͳ͔ͬͨ΋ͷͷதʹ΋
 ࣮ࡍʹ͸େྔੜ࢈඼ͷग़඼ऀ͕ଘࡏ͢ΔՄೳੑ͕͋Δ͕ݱ࣌఺Ͱະݕূ 33 ΞΧ΢ϯτ໊Λ༻͍Δ෼ྨثͷධՁ
  6. • ෼ྨثͷߏஙʹ༻͍͍ͯͳ͍ະ஌ͷσʔλ720ݸΛ෼ྨثʹద༻ • 142ݸ (19.7%) Λେྔੜ࢈඼ͷग़඼ऀͱ෼ྨ • ෼ྨ݁ՌΛӡӦऀ͕໨ࢹͯ͠11ݸ (7.7%) ͕େྔੜ࢈඼ͷग़඼ऀͩͬͨ

    • େྔੜ࢈඼ͷग़඼ऀͱ෼ྨ͞Εͳ͔ͬͨ΋ͷͷதʹ΋
 ࣮ࡍʹ͸େྔੜ࢈඼ͷग़඼ऀ͕ଘࡏ͢ΔՄೳੑ͕͋Δ͕ݱ࣌఺Ͱະݕূ 37 ঎඼໊ͱ঎඼આ໌จΛ༻͍Δ෼ྨثͷධՁ