Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
Роман Михайлов (Skyeng) — Как провести 24 экспе...
Search
Ozon Tech
July 28, 2022
Technology
0
1.3k
Роман Михайлов (Skyeng) — Как провести 24 эксперимента на 100 тыс. пользователей за месяц и не умереть
Ozon Tech
July 28, 2022
Tweet
Share
More Decks by Ozon Tech
See All by Ozon Tech
Сергей Горшенин, «Конвертация данных Ozon»
ozontech
0
16
Юрий Гуреев, «Интеграция 1С с внешними системами. Проблемы и их решения»
ozontech
0
37
Артём Нургалиев, «Кэш на кэш: как ускоряли автобиддеры»
ozontech
0
14
Анна Мария Попова (Х5 Tech) – Фантастический техпис: может ли опыт создания художественных книг помочь в написании документации
ozontech
0
170
Александр Мачулин (Gramax) – Справочник фантастических тварей из Docs as Code
ozontech
0
120
Мария Смирнова – Дзен и искусство работы с документацией: как использовать принципы буддизма в работе техписа
ozontech
0
110
Сергей Кузнецов – «Эксперименты с нейросетями в рекомендациях»
ozontech
0
110
Артём Нургалиев – «MLOps, автоматизированное обучение и доставка моделей»
ozontech
0
98
Артём Панин – «Автоматическое управление рекламой в Ozon»
ozontech
0
110
Other Decks in Technology
See All in Technology
データプロダクトの定義からはじめる、データコントラクト駆動なデータ基盤
chanyou0311
3
360
Zennのパフォーマンスモニタリングでやっていること
ryosukeigarashi
0
420
Next.jsとNuxtが混在? iframeでなんとかする!
ypresto
2
450
組織成長を加速させるオンボーディングの取り組み
sudoakiy
3
260
Terraform Stacks入門 #HashiTalks
msato
0
360
飲食店データの分析事例とそれを支えるデータ基盤
kimujun
0
220
SAP Community and Developer Update
sygyzmundovych
0
350
Storybook との上手な向き合い方を考える
re_taro
5
1.7k
CDCL による厳密解法を採用した MILP ソルバー
imai448
3
200
アジャイルチームがらしさを発揮するための目標づくり / Making the goal and enabling the team
kakehashi
3
170
DynamoDB でスロットリングが発生したとき/when_throttling_occurs_in_dynamodb_short
emiki
0
270
Why App Signing Matters for Your Android Apps - Android Bangkok Conference 2024
akexorcist
0
130
Featured
See All Featured
Rebuilding a faster, lazier Slack
samanthasiow
79
8.7k
Designing on Purpose - Digital PM Summit 2013
jponch
115
7k
Being A Developer After 40
akosma
87
590k
Building Flexible Design Systems
yeseniaperezcruz
327
38k
Code Review Best Practice
trishagee
64
17k
How STYLIGHT went responsive
nonsquared
95
5.2k
The Illustrated Children's Guide to Kubernetes
chrisshort
48
48k
Performance Is Good for Brains [We Love Speed 2024]
tammyeverts
6
430
Testing 201, or: Great Expectations
jmmastey
38
7.1k
What’s in a name? Adding method to the madness
productmarketing
PRO
22
3.1k
A better future with KSS
kneath
238
17k
The MySQL Ecosystem @ GitHub 2015
samlambert
250
12k
Transcript
Как мы провели 24 эксперимента и у нас что-то получилось
Head of product @mindpimp Who is Roman?
Как принимать решения и не одуреть от ответственности?
зачем нам 24 эксперимента о проекте решения фреймворк экспериментов мораль
План выступления
о проекте решения фреймворк экспериментов мораль План выступления зачем нам
24 эксперимента
ГДЗ
None
Сентябрь 2021 Май 2022
Сентябрь 2021 Май 2022 14 млн
Сентябрь 2021 Май 2022 14 млн 99% organic 80% SEO
only
зачем нам 24 эксперимента о проекте решения фреймворк экспериментов мораль
План выступления (на самом деле 89) и 100 000 (240 000) юзеров?
трафик Упрощенная модель монетизации
трафик какая-то магия Упрощенная модель монетизации
Упрощенная модель монетизации трафик какая-то магия деньги
Великие кривые спроса и предложения спрос предложение
Дерзкий поиск эластичности спроса
спрос предложение Перемещение кривой спроса
спрос предложение Перемещение кривой спроса Точка входа в ограничение Регистрация
Оплата
Как управлять всем этим «разнообразием»?
зачем нам 24 эксперимента о проекте решения фреймворк экспериментов мораль
План выступления
Фреймворк экспериментов дизайн эксперимента продуктовая воронка и аналитика в фигме
история апдейтов сбор результатов
Дизайн эксперимента
дизайн эксперимента Предпосылки 2.99999 1.81
PU < 2 CR в pery 12% дизайн эксперимента Какую
проблему решаем? 2.99999 1.81 0.989
дизайн эксперимента Гипотезы и критерии успеха
дизайн эксперимента Описание эксперимента
дизайн эксперимента Результаты
Фреймворк экспериментов дизайн эксперимента продуктовая воронка и аналитика в фигме
история апдейтов сбор результатов
продуктовая воронка и аналитика в фигме Детальная воронка
продуктовая воронка и аналитика в фигме Детальная воронка
Изменения на проде! Что дальше, Кэп?
RTFM! Запиши релиз ноутс или историю изменений
КЕЙС КЕЙС КЕЙС
None
None
Искать изменения Доказывать, что они были
Дебажить Искать решения Искать изменения Доказывать, что они были
Оформление результатов
Оформление результатов
зачем нам 24 эксперимента о проекте решения фреймворк экспериментов мораль
План выступления
Есть два типа боли: — Боль от самодисциплины — Боль
от сожалений дизайн эксперимента продуктовая воронка и аналитика в фигме история апдейтов сбор результатов
Создавайте процессы, которые минимизируют шансы на ошибку и количество ненужных
телодвижений, чтобы оставалось время на самое интересное дизайн эксперимента продуктовая воронка и аналитика в фигме история апдейтов сбор результатов
Роман М Head of product @mindpimp Создавайте процессы, которые минимизируют
шансы на ошибку и количество ненужных телодвижений, чтобы оставалось время на самое интересное