Slide 1

Slide 1 text

Ефективне A/B тестування в iOS додатках

Slide 2

Slide 2 text

Про себе: ● Займаюсь iOS розробкою з 2014 року. ● В Reface працюю більше трьох. ● Часто долучаюсь до обговорень продуктових ідей щоб краще розуміти потреби продукту та будувати круті додатки. ● Люблю мандаринки. ● Виховую кицьку Мію. ● Фотографую, трохи пишу музику =D

Slide 3

Slide 3 text

● Reface — українська продуктова компанія, що створює мобільні АІ- застосунки. ● Reface, Revive, Restyle, InkAI, Honestly, Re*** (coming) ● Reface народився в хакатонському вайбі. Це й стало метафорою нашої культури, яку ми втілили в чотирьох цінностях: ЛЮДИ, НЕБАЙДУЖІСТЬ, ЩИРІСТЬ і ХАЧИТИ. ● У 2023 році Reface Fund зібрав понад 4 мільйони гривень, більшість з яких — це донати рефейсіанців. Ще допомагаємо з AI-інноваціями ЗСУ і робимо нашу армію більш технологічною.

Slide 4

Slide 4 text

Навіщо нам A/B тести? ● “Щоб шо?” Чи комусь потрібна та фіча? ● Постійне покращення продукту ● Зменшення костів ● Якщо почне падати можна вимкнути ;)

Slide 5

Slide 5 text

Що ми А/B тестимо? Все що захочемо =D ● Зміни в дизайні ● Нові фічі ● Цінові тести ● Підписки ● Погіршувальні А/B тести

Slide 6

Slide 6 text

Поганий А/B тест ● ABCDE тест - тяжко захендлити адекватно всі кейси ● Одночасно декілька тестів - каша в метриках, не зрозуміло що впливає на показники ● Багато змін в одному тесті - можна зробити невірні висновки

Slide 7

Slide 7 text

Хороший А/B тест ● А/B - порівнюємо з існуючим функціоналом ● Зрозуміла і атомарна зміна ● Один тест за раз (деякі тести можна паралелити)

Slide 8

Slide 8 text

Як ми то все менеджим в апці? ● Одразу задача на випил тесту ● Не забуваємо про дефолтне значення ● Не забуваємо підчищати ● Після хард апдейту випилюємо з firebase

Slide 9

Slide 9 text

Цікаві приклади з Reface Тест зі зменшенням кількості фото на вхід дифузії (stable diffusion)

Slide 10

Slide 10 text

Цікаві приклади з Reface Відключення пушів для PRO юзерів

Slide 11

Slide 11 text

Цікаві приклади з Reface Тести онбордингу

Slide 12

Slide 12 text

Цікаві приклади з Reface Зменшення безкоштовних спроб в retouch з 3 до 1 на день.

Slide 13

Slide 13 text

Цікаві приклади з Reface Зменшення безкоштовних спроб на baby генераторі з 3 до 1 на день. Збільшили кількість покупок х5 на фічі

Slide 14

Slide 14 text

Дякую за увагу