Upgrade to Pro — share decks privately, control downloads, hide ads and more …

Convolutional Neural NetworkとRankNetを用いた画像の順序予測

sz_dr
October 19, 2016

Convolutional Neural NetworkとRankNetを用いた画像の順序予測

TokyoTech LT (2016/10/19)で発表した資料です

sz_dr

October 19, 2016
Tweet

More Decks by sz_dr

Other Decks in Technology

Transcript

  1. お前誰よ? 2 鈴木翔吾 / Shogo D. Suzuki @sz_dr • 東京工業大学

    大学院情報理工学研究科 計算工学専攻 秋山研究室 • ケモインフォマティクス・機械学習 • メインはPython,たまにC++
  2. 今日のお話 3 ♥ 研究でやってること A B C A ≻ B

    ≻ C A ≻ C ≻ B 化合物 タンパク質 機械学習で順序を予測
  3. 今日のお話 4 ♥ 研究でやってること A B C A ≻ B

    ≻ C A ≻ C ≻ B 化合物 タンパク質 機械学習で順序を予測 今日お話すること A B C 画像 ♥ @sz_dr A ≻ B ≻ C A ≻ C ≻ B 機械学習で順序を予測
  4. 好み関数のモデル化 6 好み関数 0.9 画像 スコア (RGB, W, H) =

    (3, 80, 80) Convolutional Neural Network : ℝ1×2×3 → ℝ 画像認識の分野で広く用いられているモデル [LeCun+ 98] ※話すと長くなる部分なので, 知らない方は各自調べてみてください
  5. 好み関数の最適化 7 好み関数 : ℝ1×2×3 → ℝ @sz_drの好みを反映するように 好み関数のパラメータを学習する 訓練データ

    : 9 : 8 ⋮ : 1 損失関数 を最小化するように学習 (Rank Net) ※ と を近づけていくイメージ 好み関数がAをBよりも高く ランク付けする確率 好み関数による画像A, Bの予測スコア Aの方が好きなとき1 Bの方が好きなとき0 同じくらい好きなとき0.5 [Burges+ 05]
  6. テストデータの予測 11 訓練データ : 9 : 8 ⋮ : 1

    テストデータ 『ラブライブ!』 『ラブライブ!サンシャイン!!』 ※訓練データにテストデータの画像は含まれていないことに注意
  7. まとめ 15 やったこと Convolutional Neural NetworkとRankNetを用いた画像の順序予測 応用先は? 漫画の表紙買いとか…広告画像の最適化とか…?? できてないこと •

    訓練データを集めるのが大変 (人手による評価が必要) • 評価値のバラエティの考慮 (9段階も必要…?Excellent・Good・Badくらいで良い??) • CNNでは見た目しか考慮できない (キャラクターの性格等をどうやって考慮する…??)