Upgrade to Pro — share decks privately, control downloads, hide ads and more …

いい感じの素材選択ロジック / How to select videos for 1sec Movie

_sobataro
February 13, 2019

いい感じの素材選択ロジック / How to select videos for 1sec Movie

みてねのMeetup #4 1秒動画の作り方 〜深層学習とデータ分析で最高のダイジェスト動画を作る〜
https://mixi.connpass.com/event/115664/

みてねのアルバムにある大量の画像・動画から、1秒動画に利用するものをどのように選んでいるのかご紹介します。

_sobataro

February 13, 2019
Tweet

More Decks by _sobataro

Other Decks in Technology

Transcript

  1. 素材選択とは みてねのアルバム 家族のもつ画像・動画 (Medium) が撮影日時順に並んでいる 一般的な家族: 1 ヶ月に50 点以上の Medium

    を持つ 1 秒動画 3 ヶ月分のアルバムから、20 点の Medium をまとめた動画 素材選択 多数 (150 点以上) の Medium の中から20 点だけを選び出す操作 4
  2. 素材選択の考えかた 2. Medium の点数づけ 以下のような項目を見て、各 Medium に点数をつける みてね固有の メタデータ 一般的な

    画像・動画解析 みてね固有の 画像・動画解析 公開範囲 コメント お気に入り 顔検出 人物検出 BGM 検出 壊れ動画検出 真っ暗検出 雰囲気の例: 「コメントが盛り上がっているので +10 点」 「顔がよく写っているので +20 点」 「動画ファイルが壊れているので -100 点」 8
  3. ルールのつくりかた 1. Product Owner やデザイナなど 関係者にヒアリング 2. ルールを試作 3. ルールの出力を関係者でレビュー

    4. レビュー結果をもとに修正 5. 満足できるまで 3. と 4. を繰り返す リリース前のほか、 CS への入信など様子を見て のサイクルを適宜実施 チューニング用の管理画面 11
  4. まとめ 素材選択 = 3 ヶ月間にある多数の Medium からs20 点を選び出す操作 1 秒動画の素材選択はルールベース

    素材となる Medium を点数付け 撮影日時を均等にしつつ高得点な Medium を選ぶ Product Owner やデザイナの意見をもとに ルールの試作・調整とレビューを繰り返してチューニング 今後はルールの定量的な評価に基づく改善や 解析項目の充実に取り組みたい 15