CodeFest 2018. Артур Кузин (Dbrain) — AvitoNet: поиск по фото

Посмотрите выступление Артура: https://2018.codefest.ru/lecture/1256/

Доклад будет посвящен поиску по фото среди товаров Avito. Будет рассказано про постановку задачи, сбор данных, обучение нейросетей и общий пайплайн сервиса.

Transcript

1. AvitoNet: поиск по фото Артур Кузин Dbrain ak@dbrain.io
2. Сайт объявлений №1 в России* * по данным ООО “ЛПСР” (Livejournal.ru) В категории “Товары и услуги” на 30 августа 2016 года 39 миллионов активных объявлений ~ 900 категорий товаров
3. Модерация в Avito Rules Ок -illegal content -wrong category ...
4. Модерация в Avito Image Service Category ~900 Illegal content Contacts in description
5. Предыстория
6. Немного теории 1x1x512 N classes Feature extractor
7. Представление изображения https://distill.pub/2017/feature-visualization/
8. Imagenet Imagenet 1k 1.2M изображений 1000 классов Imagenet 21k 12M изображений 21000 классов
10. accuracy
11. AvitoNet AvitoNet Проверка правил модерации ~100 Определение категории ~900 Генерация заголовка ~2500 Поиск по фото
12. AvitoNet 4000+ классов 8M+ изображений https://youtu.be/c7d2E_zkju8
13. Локализация объекта Zhou, Bolei, et al. "Learning deep features for discriminative localization." Computer Vision and Pattern Recognition (CVPR), 2016 IEEE Conference on. IEEE, 2016.
14. Как же теперь сделать поиск? 1x1x512 120 8 + PCA 128 index
15. Общая схема AvitoNet 128 index
16. Примеры поиска Good So-so