Try new Firebase AB testing

by Suguru Kishimoto

Slide 1

Slide 1 text

5SZOFX'JSFCBTF"#UFTUJOH pSFCBTFZFCJTV

Slide 2

Slide 2 text

8IPBN* w 4VHVSV,JTIJNPUP w J04&OHJOFFSBU$PPLQBE*OD d w 5XJUUFSTHSLTNUEFW w (JU)VCTHSLTNU w 2JJUBTHSLTNU

Slide 3

Slide 3 text

"NTUFSEBN

Slide 4

Slide 4 text

'JSFCBTF%FW4VNNJU

Slide 5

Slide 5 text

8IBUJT"#UFTUJOH w'JSFCBTF%FW4VNNJUͰൃද͞Εͨ৽ػೳ wϕʔλ൛ w"#Oςετʹ΋ରԠ w3FNPUF$POpH /PUJpDBUJPOTͰ࢖༻Ͱ͖Δ

Slide 6

Slide 6 text

%JGGFSFODF 3FNPUF$POpHͰ΋৚݅ʹԠͨ͡ग़͠෼͚͕Ͱ͖ͨͷͰ "#ςετͬΆ͍͜ͱ͕Ͱ͖͚ͨͲɺͦΕͱͷҧ͍͸ w৚݅ʹैͬͯࢦఆͨ͠3FNPUF$POpHͷ஋ΛҰׅͰ ग़͠෼͚ͯ͘ΕΔ w໨ඪΛఆΊͯɺςετΛ࣮ߦͰ͖ɺͲͷύλʔϯ͕ྑ͔ͬ ͨͷ͔൑அͯ͘͠ΕΔʢͰ͖Δʣ w/PUJpDBUJPOTʹ΋ରԠ

Slide 7

Slide 7 text

೥લʹཉ͔ͬͨ͠ʜʜ

Slide 8

Slide 8 text

5SZ w3FNPUF$POpHΛ։͍ͯɺ"#UFTUJOHΛબ୒͢Δ

Slide 9

Slide 9 text

5SZ wςετΛ৽ن࡞੒͢Δ wࠓޙ͜͜ʹ͸࣮ߦதɺԼॻ͖ɺ ׬ྃͱ͍ͬͨεςʔλεͰ ςετ͕ฒΜͰ͍͘

Slide 10

Slide 10 text

5SZ wςετ໊ʢͱඞཁ͕͋Ε͹આ໌ʣΛೖྗ͢Δ

Slide 11

Slide 11 text

5SZ wλʔήοτͱͳΔϢʔβʔͷ৚݅ɺׂ߹Λઃఆ͢Δ wόʔδϣϯɺϓϩύςΟͱ͍ͬͨ΋ͷ΋ࢦఆՄೳ w1SFEJDUJPOTͷ߲໨͕͋ΔͬΆ͍

Slide 12

Slide 12 text

5SZ wάϧʔϓͱɺͦͷάϧʔϓʹग़͍ͨ͠3FNPUF$POpH ͷ஋Λઃఆ͍ͯ͘͠ wมԽͳ͠ͷ৔߹͸طఆ஋͕࢖ΘΕΔ

Slide 13

Slide 13 text

5SZ w"#Oςετͩͱ͜Μͳײ͡

Slide 14

Slide 14 text

5SZ wςετͷ໨ඪΛܾΊΔ wఆண΍Τϯήʔδϝϯτͷଞ"OBMZUJDTͷΠϕϯτΛ ໨ඪʹ΋Ͱ͖Δ

Slide 15

Slide 15 text

5SZ w͜͜·Ͱઃఆ͕Ͱ͖ͨΒϨϏϡʔΛΆͪͬͱ

Slide 16

Slide 16 text

5SZ

Slide 17

Slide 17 text

5SZ wԼॻ͖ͷঢ়ଶͳͷͰςετΛฤूͨ͠Γɺ࣮ߦͨ͠Γɺ ෳ੡ͨ͠Γ࡟আ͕Ͱ͖Δ wςετΛ࣮ߦ͢Δͱ৚݅౳͸มߋͰ͖ͳ͘ͳΔ w࠶౓ࣅͨΑ͏ͳ৚݅Ͱߦ͍͍ͨɺ࡞Γ௚͍ͨ࣌͠͸ෳ੡ ͢Δ

Slide 18

Slide 18 text

5SZ wςετ࣮ߦલͳΒɺ*OTUBODF*%Λࢦఆͯ͠ɺಛఆͷ୺ ຤ʹͲͷύλʔϯΛڧ੍తʹग़͔͢ࢦఆͰ͖Δ

Slide 19

Slide 19 text

5SZ wςετ։࢝ޙ͸֓ཁը໘Ͱ݁ՌΛ֬ೝͰ͖Δ w༷ࢠΛΈͯɺ഑৴਺Λ૿΍͢͜ͱ΋Ͱ͖Δɻ࠷ॳ͔Β ʹͯ͠ςετΛ࣮ߦͯ͠͠·͏ͱݮΒͤͳ͍ͷͰ ஫ҙ wςετΛதࢭͨ͠Γෳ੡ͨ͠ΓɺςετΛ׬ྃͨ͠ΓͰ ͖Δ

Slide 20

Slide 20 text

5SZ wˋదԠΛ͢ΔͱςετΛ׬ྃͰ͖Δ wదԠ࣌ʹͲͷύϥϝʔλΛదԠ͢Δ͔ܾΊΔ͜ͱ͕Ͱ͖ Δ

Slide 21

Slide 21 text

5SZ wมߋΛެ։Λԡ͢ͱɺύϥϝʔλͷߋ৽͕ߦΘΕɺશϢʔ βʔʹ൓ө͞ΕΔ 3FNPUF$POpHͷ஋͕ߋ৽͞Ε Δ

Slide 22

Slide 22 text

%FNP IUUQTHJUIVCDPNTHSLTNU'JSFCBTF"#5FTUJOH&YBNQMF

Slide 23

Slide 23 text

-JCSBSZ w 3FNPUF$POpHͰऔಘͰ͖Δ஋Λ4XJGUͰ 5ZQF4BGFʹѻ͏ϥΠϒϥϦ࡞Γ·ͨ͠ w IUUQTHJUIVCDPNTHSLTNU-PCTUFS w ໊લ͕-PCTUFSͳͷ͸࡯͍ͯͩ͘͠͞ w ⭐͍ͩ͘͞