Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
ABテストが上手く行かなかった話
Search
Marina Nakagawa
October 16, 2018
1
560
ABテストが上手く行かなかった話
Marina Nakagawa
October 16, 2018
Tweet
Share
More Decks by Marina Nakagawa
See All by Marina Nakagawa
業務改善の面白さ~毎日更新されるビジュアルコンテンツの差分を わかりやすくするためのプロトタイプを作るまで~
marina1017
4
6.3k
通知にプレースホルダーを入れてみたら開封率がちょっと良くなった話
marina1017
1
1.8k
アプリ流入用広告のデータ分析基盤を整える ~FirebaseとiAd.frameworkの連携~
marina1017
2
3.5k
「開発初心者は何がわからないのか」 わからないを言語化するヒント
marina1017
2
920
Appleのアニメーションはなぜ美しいか考える
marina1017
1
2.1k
Appleのアニメーション.pdf
marina1017
0
47
gitの裏側をさぐる
marina1017
0
460
Lottieによるリッチアニメーション実装のためのAfterEffectsハマりどころ
marina1017
3
11k
Bitriseことはじめ
marina1017
12
3.4k
Featured
See All Featured
Principles of Awesome APIs and How to Build Them.
keavy
126
17k
It's Worth the Effort
3n
184
28k
Into the Great Unknown - MozCon
thekraken
35
1.6k
GitHub's CSS Performance
jonrohan
1030
460k
What’s in a name? Adding method to the madness
productmarketing
PRO
22
3.3k
Unsuck your backbone
ammeep
669
57k
Refactoring Trust on Your Teams (GOTO; Chicago 2020)
rmw
33
2.8k
Docker and Python
trallard
44
3.3k
Being A Developer After 40
akosma
89
590k
CoffeeScript is Beautiful & I Never Want to Write Plain JavaScript Again
sstephenson
160
15k
JavaScript: Past, Present, and Future - NDC Porto 2020
reverentgeek
47
5.2k
The Pragmatic Product Professional
lauravandoore
32
6.4k
Transcript
鸐濼鏩閉桦ぢ♳ךך倵瘻ך "#ذأزדֲתְַֻזַ鑧 傈劤穗幥倜耀爡խ⚥䊛♰蛁㣽 Otemachi.swift #02
Marina Nakagawa @marina10172013 ຊܦࡁ৽ฉࣾͷiOSΤϯδχΞ ిࢠ൛ΞϓϦɼࢴ໘ϏϡʔΞʔΞϓϦͷ։ൃ
ຊ͢͜ͱ ࣮ࡍʹऔΓΜͩ͜ͱ ௨ڐΛ্ͤ͞ΔͨΊͷࢪࡦͷ֓ཁ 1 2 3 ݁Ռͱ·ͱΊ
௨ڐΛ্ͤ͞ΔͨΊͷࢪࡦͷ֓ཁ 1
ܦిࢠ൛ͷ௨ڐʹ͍ͭͯ • ిࢠ൛ͷ௨ͷڐͷΞϥʔτΛग़͢ͷىಈ࣌ • ςετ։࢝࣌ͷڐ52ˋҐ Կ͠ͳͯ͘52%͘Β͍ͷਓ ڐͯ͘͠Ε͍ͯΔ
ڐ52%ͷײ֮ New data shows up to 60% of users opt-out
of push notifications (Guest Post)ΑΓҾ༻ (https://andrewchen.co/why-people-are-turning-off-push/)
ڐ52%ͷײ֮ New data shows up to 60% of users opt-out
of push notifications (Guest Post)ΑΓҾ༻ (https://andrewchen.co/why-people-are-turning-off-push/)
ڐ52%ͷײ֮ New data shows up to 60% of users opt-out
of push notifications (Guest Post)ΑΓҾ༻ (https://andrewchen.co/why-people-are-turning-off-push/) ҰൠతͳχϡʔεͷΞϓϦͱ ൺֱ͢Δͱଟ͍
௨Λ։͘ͱهࣄʹඈͿΑ͏ʹͳͬͨ
ࠓͦ͜௨Λͬͯ΄͍͠ɾɾɾ
௨ڐΛͬͱͬͱ্͛ͯ! ϢʔβʔʹχϡʔεΛಧ͚͍ͨ
௨ΛڐՄͯ͠Β͏ʹ Γӽ͑Δඞཁ͕͋Δน͕͋Δ
None
Ծઆ ΞϓϦͷॳճΠϯετʔϧ࣌ʹ ϓογϡ௨ͷҰྫΛࣔ͠༗༻Ͱ͋Δ͜ͱΛࣔͤΕ ௨ͷڐ্͕͕ΔͷͰͳ͍͔
࣮ࡍʹऔΓΜͩ͜ͱ 2
ը໘ભҠਤ
ϙοϓΞοϓը໘ͷৄࡉ ͜ͷϘλϯΛԡͨ͠ਓ͚͕ͩ OSͷڐ௨ͷϙοϓΞοϓ͕Ͱͯ͘Δ
ϙοϓΞοϓը໘ͷৄࡉ
ϙοϓΞοϓը໘ͷৄࡉ ࠓΊ͓ͯ͘ϘλϯΛԡͨ͠ਓ ֎λοϓΛͨ͠ਓ ԼεϫΠϓΛͨ͠ਓ
ϙοϓΞοϓը໘ͷৄࡉ
݁Ռͱ·ͱΊ 3
▪ ϙοϓΞοϓͳ͠ɿ40% ▪ ϙοϓΞοϓ͋Γɿ21% ௨ڐ:52% ࣮ࢪޙ ࣮ࢪલ A/Bςετͷ݁Ռ
A/Bςετͷ݁Ռ ϙοϓΞοϓΛදࣔͨ͠σόΠεͷํ͕ ௨ONͷׂ߹͕ఔͩͬͨ
A/Bςετͷ݁Ռ ϙοϓΞοϓΛදࣔͨ͠σόΠεͷํ͕ ௨ONͷׂ߹͕ఔͩͬͨ མͪͯΔɾɾɾɾɾ "
ݪҼʁ Ϣʔβʔ͕͢Δͱ͜ΖΛ࡞ͬͯ͠·ͬͨ 1 2 ϝϦοτΛϢʔβʔʹ͖͑Ε͍ͯͳ͔ͬͨ
Ϣʔβʔ͕͢Δͱ͜ΖΛ࡞ͬͯ͠·ͬͨ 1
Ϣʔβʔ͕͢Δͱ͜ΖΛ࡞ͬͯ͠·ͬͨ 1
Ϣʔβʔ͕͢Δͱ͜ΖΛ࡞ͬͯ͠·ͬͨ 1 ͜ͷϘλϯΛԡͨ͠ਓ͚͕ͩ OSͷڐ௨ͷϙοϓΞοϓ͕Ͱͯ͘Δ
ࠓΊ͓ͯ͘ϘλϯΛԡͨ͠ਓ ֎λοϓΛͨ͠ਓ ԼεϫΠϓΛͨ͠ਓ 70%ͷਓ͕OSͷڐ௨Λ ݟͳ͍͜ͱʹͳͬͯ͠·ͬͨ Ϣʔβʔ͕͢Δͱ͜ΖΛ࡞ͬͯ͠·ͬͨ 1
◦ཁૉΛͻͱ͚ͭͩม͑ͯςετ͢Δͷ͕A/Bςετͳͷʹɺ ෳཁૉͰൺֱͤͯ͞͠·ͬͨ ◦͕ࣗίϯςϯπͷத(ಈըͷ੍࡞දهͷ༰)ʹूத͠ ͯ͠·͍ભҠͷ͜ͱ·Ͱߟ͍͑ͯͳ͔ͬͨ ◦ԼϑϦοΫɺແࢹ͢Δͱ͍͏બࢶແͯ͘͠Α͔ͬͨ ഊҼ Ϣʔβʔ͕͢Δͱ͜ΖΛ࡞ͬͯ͠·ͬͨ 1
Ծઆ ϓογϡ௨ͷҰྫΛࣔ͠༗༻Ͱ͋Δ͜ͱΛࣔͤΕ ௨ͷڐ্͕͕Δ͔͔֬ΊΔ ࢼ͢͜ͱ OSͷ௨ڐ͕ग़ΔલʹϙοϓΞοϓը໘Ͱ ༗༻Ͱ͋Δ͜ͱΛઆ໌͢Δ͜ͱͰ௨ڐมΘΔͷ͔ Ϣʔβʔ͕͢Δͱ͜ΖΛ࡞ͬͯ͠·ͬͨ 1
Ծઆ ϓογϡ௨ͷҰྫΛࣔ͠༗༻Ͱ͋Δ͜ͱΛࣔͤΕ ௨ͷڐ্͕͕Δ͔͔֬ΊΔ ࢼ͢͜ͱ OSͷ௨ڐ͕ग़ΔલʹϙοϓΞοϓը໘Ͱ ༗༻Ͱ͋Δ͜ͱΛઆ໌͢Δ͜ͱͰ௨ڐมΘΔͷ͔ Ϣʔβʔ͕͢Δͱ͜ΖΛ࡞ͬͯ͠·ͬͨ 1 มߋ͢Δ͖ϙοϓΞοϓը໘Λग़͔͢ग़͞ͳ͍͔Ͱ͋Γ OSͷ௨ڐը໘Λग़͔͢ग़͞ͳ͍͔มߋΛՃ͑Δ͖Ͱͳ͍
ʮࠓΔ͖ʯΛಀ͞ͳ͍ ศརͳϓογϡ௨ 2 ϝϦοτΛϢʔβʔʹ͖͑Ε͍ͯͳ͔ͬͨ ◦ҙࢥܾఆΛઌʹ͖͚࣋ͬͯͨͲใ͕গͳ͍͔Β͔͠Εͳ͍ ◦ಈըॏཁͰͳ͍͔͠Εͳ͍ ஔͷͰจݴͱϘλϯΛ͚ۙͮͨ΄͏͕Α͔͔ͬͨ ◦ϘλϯͷબࢶͰ͋Δ ʮ͍·Ί͓ͯ͘ʯ·ͩνϟϯε͕༗ΔΑ͏ʹݟ͑Δ
·ͱΊ A/BςετΛ࣮ࢪ͢Δ࣌ɺ ຊʹཁૉΛͻͱ͚ͭͩม͑ͯൺֱͯ͠Δͷ͔֬ೝ͢Δ ϙοϓΞοϓʹදࣔͨ͠ίϯςϯπ͕ຊʹྑ͔ͬͨͷ͔Ͳ͏͔Θ͔Βͳ͍ จݴίϯςϯπʹΑͬͯҧ͍͕͋Δͷ͔ͱ͍͏ͷࢼͯ͠Έ͍ͨ
͋Γ͕ͱ͏͍͟͝·ͨ͠