Upgrade to Pro — share decks privately, control downloads, hide ads and more …

Image Analysis at Cookpad

Image Analysis at Cookpad

Leszek Rybicki

April 21, 2018
Tweet

More Decks by Leszek Rybicki

Other Decks in Programming

Transcript

  1.      で
    画像解析
    第45回 コンピュータビジョン勉強会@関東
    2018/04/21

    View Slide

  2. 自己紹介
    ● レシェック
    ● ポーランド
    ● github: @lunardog
    ● 趣味:ハイキング
    ● 2016からクックパッド

    View Slide

  3. 毎日の料理を楽しみにする
    Make everyday cooking fun!

    View Slide

  4. 東京の研究開発部
    ● 画像データ
    ● 自然言語
    ● 音声インターフェース
    ● MLOps
    ● 食文化研究
    ● チャットボット
    ● IoT
    ● モバイル実装
    ● 。。。

    View Slide

  5. 料理・非料理

    View Slide

  6. ディープラーニングによるホットドッグ検出器のレシピ
    http://techlife.cookpad.com/entry/2018/04/06/124455

    View Slide

  7. Hot Dog DEMO
    https://tokyo-ml.github.io/hotdog-tf-js/

    View Slide

  8. Cookpad ML Vision API
    ● フードマップ
    ● 食材検出
    ● フードスタイリング
    ● 魅力推定
    ● インターナルBETA版

    View Slide

  9. API DEMO

    View Slide

  10. チャットボット
    ● 食材の写真から
    レシピ検索機能
    ● 「気分」から検索
    ● クローズドベータ

    View Slide

  11. Recipe Classification
    ● 料理写真を適切なレシピカテゴリに
    分類
    ● Open Set Problem
    ● One vs Rest
    ● 様々な実験を経てモデルを作成
    https://arxiv.org/abs/1802.01267

    View Slide

  12. Global Cookpad

    View Slide

  13. イギリスのオフィス

    View Slide

  14. Auto CROP
    フードマップを使って、一
    番いいクロッピングを見つ
    けるアルゴリズム。

    View Slide

  15. 未来はビデオデータです。

    View Slide

  16. ● 代官山のスタディオ
    ● ユーザーが撮ったレシピ動

    View Slide

  17. Cookin’ https://cookin.cookpad.com/
    ● 楽しくて、簡単な料理
    ストリーミングapp
    ● 一緒に作りましょ!

    View Slide

  18. 以上

    View Slide