タグ情報とコメント密度を用いた画像サムネイル推薦システム

動画内の魅力的かつ動画タグに合ったいい感じの画像サムネイルを推薦するシステムのお話

〜 動画投稿者が動画を投稿する際に, 動画をアップロードした段階で自分の投稿するカテゴリを動画から予測して, そのカテゴリに合った"いい感じ"の画像サムネイル候補が出てきたら便利だな という気持ちを込めて構築したシステムです♪

[17年度 Dwango Media Village インターン成果報告会 資料(公開ver)]

Transcript

1. `
   JOUFSO
   ੒Ռใࠂձ λά৘ใͱίϝϯτີ౓Λ༻͍ͨ
 ը૾αϜωΠϧਪનγεςϜ :BNBHVDIJ
   4P
   BLB
   XLUL  1VCMJD
2. ˒໨త  ಈըΛೖྗͨ͠ΒͦͷಈըΒ͍͠λάΧςΰϦٴͼ
 ͦͷλάΧςΰϦʹ;͞Θ͍͠ը૾αϜωΠϧͷਪન ಈը ೖྗ λά ը૾αϜωΠϧͷީิ ਪન Ϟσϧ
3. ˒ϑϨʔϜ͔ΒλάΛ༧ଌ͢ΔϞσϧ  ϑϨʔϜ 5BH
   
   5BH
   
   5BH
   
   ʜ
   5BH
   
   5BH
   
   ʜ
   5BH
   
   5BH
    λάείΞ Ϟσϧ
4. ˒ίϝϯτີ౓ͷߴ͍ϑϨʔϜ͕ಈըΛ࠷΋આ໌͍ͯ͠ΔͱԾఆ  2:27 で動画が最も盛り上がり大量のコメントがついている ඵ ίϝϯτ਺ ग़య
   ͨΘ͠Ͷ͜ɹߥͿΔͨΘ͠ͷϙʔζ
   IUUQXXXOJDPWJEFPKQXBUDITN
5. ˒ϑϨʔϜ͔Βίϝϯτີ౓Λ༧ଌ͢ΔϞσϧ  ϑϨʔϜ ίϝϯτ਺ ίϝϯτ਺ Ϟσϧ
6.  λάਪఆϞσϧ ίϝϯτີ౓Ϟσϧ 4DPSF ϑϨʔϜ Ϟσϧ ˒γεςϜ
   λά౓ͷߴ͘
   
   ίϝϯτີ౓ͷߴ͍ϑϨʔϜ
7.  ݖར্
   ը૾αϜωΠϧٴͼਪનαϜωΠϧ͸঺հͰ͖ͳ͍ͷͰߏ੒͚ͩ঺հ ౤ߘͨ͠ಈըͷ
 ը૾αϜωΠϧ ౤ߘͨ͠ಈըͷ
 ը૾αϜωΠϧ ީิ ީิ ީิ ީิ ީิ ީิ χίχίಈըʹ౤ߘ͞ΕͨಈըΛ༻͍ͨը૾αϜωΠϧਪનγεςϜ ˒࡞ͬͨ΋ͷ
   ʙτοϓϖʔδ
8.  4ZTUFN
   λά౓ͷߴ͘
   
   
 ίϝϯτີ౓ͷߴ͍ϑϨʔϜ
 Λද͍ࣔͯ͠Δ ˒࡞ͬͨ΋ͷ
   ʙղੳϖʔδ ग़య
   ͨΘ͠Ͷ͜ɹߥͿΔͨΘ͠ͷϙʔζ
   IUUQXXXOJDPWJEFPKQXBUDITN
9.  ଟ͘ͷࢹௌऀʹݟͯ΋Β͏ͨΊʹ ࢹௌऀ͕ΫϦοΫͯ͘͠ΕΔΑ͏ͳ
 ັྗతͳϑϨʔϜ͕ཉ͍͠
   ࢹௌऀ ը૾αϜωΠϧΛࣗಈͰબ୒ਪનͯ͘͠ΕΔϝϦοτ ௼ΒΕͨ͘ͳ͍
 ಈը಺༰ͱؔ܎ͷ͋Δը૾αϜωΠϧ
 ͩͱخ͍͠ ౤ߘऀ
10. ຊݚڀͷ໨త  ଟ͘ͷࢹௌऀʹݟͯ΋Β͏ͨΊ ʹࢹௌऀ͕ΫϦοΫͯ͘͠ΕΔΑ͏ͳ
 ັྗతͳϑϨʔϜ͕ཉ͍͠
    ௼ΒΕͨ͘ͳ͍
 ಈը಺༰ͱؔ܎ͷ͋Δ
 ը૾αϜωΠϧͩͱخ͍͠ ͜ͷೋͭͷ໨తΛຬͨ͢ը૾αϜωΠϧਪનγεςϜ
 ͷߏஙΛ໨ࢦ͢
11.  ؔ࿈ݚڀᶃ
    
    ΫΤϦʹԊͬͨը૾αϜωΠϧਪનͷݚڀ ௼ΒΕͨ͘ͳ͍
 ಈը಺༰ͱؔ܎ͷ͋Δը૾αϜωΠϧͩͱخ͍͠ IUUQTBSYJWPSHBCT 2VFSZBEBQUJWF
    7JEFP
    4VNNBSJ[BUJPO
    WJB
    2VBMJUZBXBSF
    3FMFWBODF
    &TUJNBUJPO  ಈը͔ΒΫΤϦ จষ୯ޠ ʹԊͬͨཁ໿Λੜ੒͢Δݚڀ
    ΫΤϦͷଟ༷ੑΛ૿΍ͨ͢Ίʹ #JOHͷσʔληοτΛ༻͍ͯ ୯ޠͱͦΕʹؔ܎͢Δը૾ͷFNCFEEJOH
    ۭؒΛߏஙͨ͠
    จষ͝ͱϕΫτϧʹม׵͢Δ͜ͱʹΑͬͯ
    ݻ༗໊ࢺ΍จষʹ΋ ରԠͰ͖ΔΑ͏ʹͳͬͨ
    τϥΠΞεϩϯͷಈըʹରͯ͠ਫӭͱ͍͏ΫΤϦͰੜ੒ͨ͠ཁ໿ͷྫ
12.  ຊݚڀͰ͸ ௼ΒΕͨ͘ͳ͍
 ಈը಺༰ͱؔ܎ͷ͋Δը૾αϜωΠϧͩͱخ͍͠ Ξχϝ
     ήʔϜ
    
    
    ಈ෺
     ϑϨʔϜ͔ΒͦͷϑϨʔϜͷλά ΧςΰϦؚΉ Λਪન͢Δ
 Ϛϧνλά༧ଌϞσϧΛߏஙͨ͠ λά༧ଌ
 Ϟσϧ 'SBNF χίχίಈըʹ౤ߘ͞Εͨಈը
 ͷසग़্ҐλάΛλάͱͯ͠༻͍Δ ग़య
    ͨΘ͠Ͷ͜ɹߥͿΔͨΘ͠ͷϙʔζ
    IUUQXXXOJDPWJEFPKQXBUDITN
13.  ؔ࿈ݚڀᶄ
    
    ັྗతͳը૾αϜωΠϧਪનͷݚڀ ଟ͘ͷࢹௌऀʹݟͯ΋Β͏ͨΊʹࢹௌऀ͕ΫϦοΫͯ͘͠Ε ΔΑ͏ͳັྗతͳϑϨʔϜ͕ཉ͍͠ IUUQTSFTFBSDIHPPHMFCMPHDPNJNQSPWJOHZPVUVCFWJEFPUIVNCOBJMTXJUIIUNM :0656#&
    ͷಈըͷ
 ը૾αϜωΠϧਪનͷهࣄ  
 
 ಈըϑϨʔϜશମʹ͍ͭͯ
 ը૾αϜωΠϧ͔Ͳ͏͔ͷ
 ஋෼ྨثͰ൑அͯ͠
 αϜωΠϧ౓ͷߴ͍ϑϨʔϜΛਪન ‎αϜωΠϧ͔Ͳ͏͔ͱ͍͏஋ʹ஫໨ͨ͠
14. ؔ࿈ݚڀᶅ
    
    ࣌ܥྻ͝ͱͷϑϨʔϜʹ෇ਵ͢Δ৘ใྔΛ༻͍ͨݚڀ  ଟ͘ͷࢹௌऀʹݟͯ΋Β͏ͨΊʹࢹௌऀ͕ΫϦοΫͯ͘͠Ε ΔΑ͏ͳັྗతͳϑϨʔϜ͕ཉ͍͠ 5XJUUFSͷπΠʔτ਺Λ༻͍ͨϋΠϥΠτݕग़ͷݚڀ αοΧʔͷࢼ߹ͱ5XJUUFS࣮گΛ༻͍ͯࢼ߹ͷϋΠϥΠτΛࣗಈ ੜ੒͢Δݚڀ
    NPWJOHUISFTIPME
    CVSTU
    EFUFDUJPOΛ༻͍ͯ
    ͦͷᮢ஋Λ
 ௒͑ͨΛϋΠϥΠτͱͨ͠ -JWF
    4FNBOUJD
    4QPSU
    )JHIMJHIU
    %FUFDUJPO
    #BTFE
    PO
    "OBMZ[JOH
    5XFFUT
    PG
    5XJUUFS  

    IUUQJFFFYQMPSFJFFFPSHEPDVNFOU SFMPBEUSVF
15. ؔ࿈ݚڀᶅ
    
    ࣌ܥྻ͝ͱͷϑϨʔϜʹ෇ਵ͢Δ৘ใྔΛ༻͍ͨݚڀ  ίϝϯτͷ੝Γ্͕Γ ಈըͷίϝϯτ਺ͷଟ͍Օॴ͸
 ϋΠϥΠτʹͳΓ͏Δ ଟ͘ͷࢹௌऀʹݟͯ΋Β͏ͨΊʹࢹௌऀ͕ΫϦοΫͯ͘͠Ε ΔΑ͏ͳັྗతͳϑϨʔϜ͕ཉ͍͠ 2:27 で動画が最も盛り上がり大量のコメントがついている w IUUQTXXXTMJEFTIBSFOFU)J@LJOHTT
    w IUUQNVTUDVUPLZPBDKQTJHBNTJHBNTJHBNQEG ‎ಈըͷ֤ϑϨʔϜʹͲΕ͘Β͍
 ίϝϯτ͕෇͍͍ͯΔ͔ʹ஫໨ͨ͠ ˞ಈըʹίϝϯτ͕͍͍ͭͯͳ͍ͱ͜ͷख๏͸࢖͑ͳ͍
16. ຊݚڀͰ͸  ଟ͘ͷࢹௌऀʹݟͯ΋Β͏ͨΊʹࢹௌऀ͕ΫϦοΫͯ͘͠Ε ΔΑ͏ͳັྗతͳϑϨʔϜ͕ཉ͍͠ 'SBNF ίϝϯτີ౓
 ༧ଌϞσϧ  ϑϨʔϜ͔ΒͦͷϑϨʔϜʹͭ͘ίϝϯτ਺Λ༧ଌ͢Δ
 ίϝϯτີ౓༧ଌϞσϧΛߏஙͨ͠ ༧ଌͨ͠ίϝϯτີ౓ ˞ωοτϫʔΫ͸JODFQUJPOW
    ֶ͕श࣌ʹҰ൪MPTT͕Լ͕ͬͨͨΊ࢖༻ ग़య
    ͨΘ͠Ͷ͜ɹߥͿΔͨΘ͠ͷϙʔζ
    IUUQXXXOJDPWJEFPKQXBUDITN
17. ຊݚڀͷγεςϜʹ͍ͭͯ  ίϝϯτີ౓
 ༧ଌϞσϧ λά༧ଌ
 Ϟσϧ λά
    ೣ 4DPSF       ਪન λάείΞ͕ߴ͍
    
    ίϝϯτີ౓ͷߴ͍
 ͱ༧૝ͨ͠ϑϨʔϜ͸
 ັྗత͔ͭ
    ͦͷλάͬΆ͍ϑϨʔϜͰ͋Δ ग़య
    ͨΘ͠Ͷ͜ɹߥͿΔͨΘ͠ͷϙʔζ
    IUUQXXXOJDPWJEFPKQXBUDITN