APIへのアクセスが急増して慌てた話 / We Should Know our Application Performance

Transcript

1. API΁ͷΞΫηε͕ٸ૿ͯ͠߄ͯͨ࿩ 2018/06/29 Minami Aoyama Night#6 தຊ ෢ࢤ 1
2. ࣗݾ঺հ தຊ
   ෢ࢤʢͳ͔΋ͱ͚ͨ͠ʣ
   גࣜձࣾϚωʔϑΥϫʔυʢʙʣ
   αʔόʔαΠυΤϯδχΞʢ+BWBʣ
   ੩Ԭݝॣ౦܊௕ઘொࡏॅ
   2
3. ௕ઘொ
   ɾࡾౡӺ
   ʙ
   ాொӺ
   ໿࣌ؒ
   
   ͩ͜·ͷΈ
   ɾࢠҭͯࢧԉΛܝ͍͛ͯΔ
   ग़ੜ཰͕੩Ԭݝτοϓ
   ɾڈ೥ʮ͞Θ΍͔ʯ͕Ͱ͖·ͨ͠ 3
4. ຊ೔ͷ಺༰ ˔ ϚωʔϑΥϫʔυͱΞάϦήʔγϣϯγεςϜͷ঺հ
   ˔ ಥવͷෛՙ૿ͰγεςϜ͕ࢭ·Γ͔͚ͨ࣌ʹͨ͜͠ͱ
   ˔ ࢭ·Βͳ͍Α͏ʹ͢ΔͨΊʹͨ͜͠ͱ
   ˔ ·ͱΊ 4
5. ຊ೔ͷ಺༰ ˔ ϚωʔϑΥϫʔυͱΞάϦήʔγϣϯγεςϜͷ঺հ
   ˔ ಥવͷෛՙ૿ͰγεςϜ͕ࢭ·Γ͔͚ͨ࣌ʹͨ͜͠ͱ
   ˔ ࢭ·Βͳ͍Α͏ʹ͢ΔͨΊʹͨ͜͠ͱ
   ˔ ·ͱΊ 5
6. ϚωʔϑΥϫʔυʹ͍ͭͯ ʮ͓ۚΛલ΁ɻਓੜΛ΋ͬͱલ΁ɻʯͱ͍͏ϛογϣϯʹ΋ͱ͖ͮɺ
   ݸਓ΍๏ਓɺ͢΂ͯͷਓͷ͓ۚͷ՝୊Λղܾ͢ΔαʔϏεΛఏڙ͍ͯ͠·͢ɻ
   6
7. ΞΧ΢ϯτΞάϦήʔγϣϯͱ͸ ిࢠϚωʔ EC ূ݊ ۜߦ ɾ࢒ߴɺೖग़ۚ໌ࡉ 0000-0000-0000-0000 0000-0000-0000-0000 ΫϨδοτΧʔυ ɾ໌ࡉɺར༻࢒ߴ ɾҾམ೔ɾֹ ɾϙδγϣϯ ɾߪೖཤྺ ɾར༻ཤྺ Ϗδωε ɾച্৘ใ 7
8. ΞάϦήʔγϣϯγεςϜͷߏ੒ ΞάϦ%# ΞάϦ ϓϩμΫτ܈ ֤ۚ༥ػؔ : σʔλͷྲྀΕ … BEFORE 8
9. ΞάϦήʔγϣϯγεςϜͷߏ੒ ΞάϦ%# ΞάϦ ϓϩμΫτ܈ ֤ۚ༥ػؔ : σʔλͷྲྀΕ … BEFORE ͍Ζ͍ΖπϥΠʜ 9
10. ΞάϦήʔγϣϯγεςϜͷߏ੒ ΞάϦ%# ΞάϦ ϓϩμΫτ܈ ֤ۚ༥ػؔ : σʔλͷྲྀΕ AFTER ΞάϦ API "1*ܦ༝ʹ౷Ұ … 10
11. ΞάϦήʔγϣϯγεςϜͷߏ੒ ΞάϦ%# ΞάϦ ϓϩμΫτ܈ ֤ۚ༥ػؔ : σʔλͷྲྀΕ AFTER ΞάϦ API … ࠓճ͸ίίͷ࿩ 11
12. ຊ೔ͷ಺༰ ˔ ϚωʔϑΥϫʔυͱΞάϦήʔγϣϯγεςϜͷ঺հ
    ˔ ಥવͷෛՙ૿ͰγεςϜ͕ࢭ·Γ͔͚ͨ࣌ʹͨ͜͠ͱ
    ˔ ࢭ·Βͳ͍Α͏ʹ͢ΔͨΊʹͨ͜͠ͱ
    ˔ ·ͱΊ 12
13. ಥવͷ503 ˔ ಥ೗αʔϏε͔ΒΞϥʔτ͕͘ΔʢΤϥʔϖʔδΛฦ͢ʣ
    ˓ ͜ͷ࣌఺Ͱ͸ΞάϦ"1*ͷύϑΥʔϚϯε͕ྼԽ͍ͯ͠Δೝࣝͳ͠
    ˔ ଞͷ։ൃऀ͕ௐࠪͯ͠ɺΞάϦ"1*͕Ϋοι஗͍ͱ࿈བྷ͕͋Δ
    ˓ ͜ͷ࣌఺ͰॳΊͯμογϡϘʔυΛ֬ೝ
    ˔ ݟͨ͜ͱͷͳ͍άϥϑΛ֬ೝ
    ˓ ୈҰใ͔Β෼΄Ͳܦա -PBE"WFSBHF
     13
14. ॳಈͷ൓ল ˔ ϦϦʔε࡞ۀͳͲΛ͍ͯ͠ͳ͍ͷͰ໰୊ͳ͍ͱࢥ͍͜ΜͰ͍ͨ
    ˓ ͔ͤͬ͘༻ҙ͍ͯ͠ΔμογϡϘʔυ͢Βݟͯͳ͔ͬͨ 14
15. ௐࠪ & ϦϦʔε ˔ /FX
    3FMJD
    ΍
    %BUB%PH
    Λݟͯ%#ίωΫγϣϯपΓͰ٧·ͬͯͦ͏
    ˓ %#ෛՙΛ্͛ͳ͍Α͏ߜͬͯಈ͔͍ͯͨ͠
    ˔ ͍ͬͨΜϓʔϧ਺Λ૿΍͢ϦϦʔεΛߦ͏
    ˔ ϦϦʔε͕׬ྃ͠ɺ"1*͕ਖ਼ৗʹϨεϙϯεΛฦ͢Α͏ʹͳΔ
    ˓ ͨͩɺϦϦʔεͷӨڹͱ͍͏ΑΓ͸ɺෛՙͷϐʔΫΛա͗ͨ͜ͱ͕େ͖͔ͬͨ
    ˔ ୈҰใ͔Β࣌ؒ΄ͲͰฏৗ௨Γͷঢ়ଶʹͳͬͨ 15
16. ෆ޾தͷ޾͍ ˔ "1.ʢ/FX
    3FMJDʣΛ࢖͍ͬͯͨͷͰͱΓ͋͑ͣͷରԠ͕Ͱ͖ͨ
    ˔ ϝτϦΫεϞχλϦϯάʢ%BUB%PHʣ΋͍ͯͨ͠ͷͰ
 ޙ͔ΒͲΜͳঢ়ଶͩͬͨͷ͔Λ؍࡯͢Δ͜ͱ͕Ͱ͖ͨ
    ˔ Ϩεϙϯε͸஗͘͸ͳ͕ͬͨɺ׬શʹఀࢭ͸͠ͳ͔ͬͨ 16
17. ෛՙ૿ͷݪҼ ˔ .'͕৽͘͠࿈ܞΛ։࢝ͨ͠αʔϏε͔Βͷྲྀೖ૿
    ˓ ࿈ܞઌͷϢʔβʔ޲͚ʹΩϟϯϖʔϯ͕ߦΘΕ͍ͯͨ
    ˓ ࣄલͷڞ༗͕ͪΌΜͱͰ͖ͯͳ͔ͬͨ
    ˔ ௨ৗ࣌ͷഒ΄ͲͷϦΫΤετ૿
    ˓ ϐʔΫ࣌ͷഒ 17
18. ຊ೔ͷ಺༰ ˔ ϚωʔϑΥϫʔυͱΞάϦήʔγϣϯγεςϜͷ঺հ
    ˔ ಥવͷෛՙ૿ͰγεςϜ͕ࢭ·Γ͔͚ͨ࣌ʹͨ͜͠ͱ
    ˔ ࢭ·Βͳ͍Α͏ʹ͢ΔͨΊʹͨ͜͠ͱ
    ˔ ·ͱΊ 18
19. ·ͣ͸ௐࠪɺͷલʹ ˔ ࣮͸͜ͷલ೔ʹ΋ߴෛՙʹͳΓαʔϏε͕ෆ҆ఆʹͳ͍ͬͯͨ
    ˔ ϦΫΤετ૿ՃʹΑΓɺ%#͕஗͘ͳΓɺͭΒΕͯ"1*΋஗͘ͳͬͨ ˔ εϩʔΫΤϦվળ
    ˔ ࢭΊͯྑ͍ॲཧΛࢭΊΔ
    ˔ "1*αʔόʔ૿΍͞ͳ͍ͱ -PBE"WFSBHF 19
20. DataDogͷμογϡϘʔυ 20
21. ·ͣ͸ௐࠪ ˔ /FX
    3FMJD
    ΍
    %BUB%PH
    ΍ΞϓϦέʔγϣϯϩάΛ֬ೝ
    ˓ %#ͷෛՙ͸ͦΜͳͰ΋ͳ͍
    ˓ "1*αʔόʔͷ$16ෛՙ͕ߴ͔ͬͨ
    ˓ ίωΫγϣϯϓʔϧ͔ΒίωΫγϣϯΛऔಘ͢Δ଴͕ͪ࣌ؒଟ͔ͬͨ
    ˔ αʔόʔͷੑೳ͕͋·Γߴ͘ͳ͔ͬͨͷͰॲཧ͖͠Εͳ͔ͬͨͱ݁࿦
    ˓ εέʔϧΞοϓͱಉ࣌ʹɺ୆਺΋૿΍͢ 21
22. ࠓޙͲ͏͢Δ͔ ˔ ΩϟϯϖʔϯͳͲ͕͋Δͱ͖͸͋Β͔͡Ί࿈བྷͯ͠΋Β͏
    ˔ ͕ͩɺࣄલʹڞ༗ͯ͠΋ΒͬͨϦΫΤετ૿ʹ଱͑ΒΕΔͷ͔ʁʁ
    ˔ ͦ͏ͩɺෛՙςετ͠Α͏ 22
23. ෛՙςετ ˔ϦΫΤετϩάΛ࠶ੜͯ͠୆ͷαʔόʔʹෛՙΛ͔͚Δ
    ˔ෛՙΛ͔͚Δαʔόʔͷ୆਺Λ૿΍ͯ͠ϦΫΤετ૿Λ࠶ݱ͢Δ
    ˔͖͍͠஋Λ୳͢
    ˓ͲΕ͘Β͍ͷϦΫΤετͳΒීஈͲ͓ΓॲཧͰ͖Δͷ͔
    ˓ෛՙ͕૿͑ͨͱ͖ʹͲͷϦιʔε͕࠷ॳʹݶքʹͳΔͷ͔
    ˔ςετ͸छྨߦͬͨ
    ˓%#ίωΫγϣϯ਺ͷͱ͖ʹͲΕ͚ͩॲཧͰ͖Δ͔
    ˓%#ίωΫγϣϯ਺ͷͱ͖ʹͲΕ͚ͩॲཧͰ͖Δ͔ 23
24. ෛՙςετ GitHub - tsenart/vegeta: HTTP load testing tool and library ˔ બΜͩཧ༝
    ˓ ϦΫΤετϩάΛ࠶ੜͰ͖Δʢ؆୯ʂʣ
    ˓ ͙͢࢖͑ΔʢόΠφϦஔ͚ͩ͘ʂʣ
    ˓ $-*Ͱૢ࡞Ͱ͖ΔʢεΫϦϓτͰ੍ޚͰ͖Δʂʣ 24
25. ෛՙςετ ˔ ໷ؒʹຊ൪αʔόʔͰςετ
    ˓ ࣮ࡍͷαʔόʔͰੑೳΛݟ͔ͨͬͨ
    ˔ ෛՙΛͩΜͩΜ૿΍͍ͯ͘͠
    • ݁Ռ͸%BUB%PHͰޙ͔Β֬ೝ
    ˓ ͍͢͝ศརͩͬͨ vegeta API vegeta vegeta … 25
26. ෛՙςετ 100 0 CPUར༻཰ 26
27. ෛՙςετ • ҆ఆͯ͠ॲཧͰ͖ΔϦΫΤετ਺ͷ্ݶΛ஌ΔͨΊͷςετ ◦ ஈ֊తʹෛՙΛ૿΍͢ ◦ Ϩεϙϯε͕ѱԽͨ͠Βऴྃ 100 0 CPUར༻ ཰ 27
28. ෛՙςετ • DBίωΫγϣϯ1ͭͰ҆ఆͯ͠ॲཧͰ͖ΔϦΫΤετ਺ͷ্ݶΛ஌ΔͨΊͷςετ ◦ ஈ֊తʹෛՙΛ૿΍͢ ◦ Ϩεϙϯε͕ѱԽͨ͠Βऴྃ 100 0 CPUར༻ ཰ 28
29. ෛՙςετͷͦͷޙ ˔ ίωΫγϣϯ਺ͰॲཧͰ͖ΔϦΫΤετ਺͕ग़ͨ
    ˔ ίωΫγϣϯ਺ͭ͋ͨΓͰॲཧͰ͖ΔϦΫΤετ਺͕ग़ͨ
    ˓ ίωΫγϣϯ਺෼ͷϦΫΤετΛॲཧͰ͖͍ͯͳ͍
    ˔ %#͸·ͩ༨༟͕͋Γͦ͏
    ˓ ΍ͬͺΓ$16͕ϘτϧωοΫͬΆ͍
    ˓ αʔόʔͷεέʔϧΞοϓ
    ˓ ແବͳίʔυ͕ͳ͍͔ௐࠪ 29
30. ͦͷޙͰ΍ͬͨ͜ͱ ˔ ෛՙςετͰܾΊ͖͍ͨ͠஋ʹԠͨ͡Ξϥʔτ
    ˔ ίʔυͷݟ௚͠
    ˓ ϨεϙϯελΠϜ͕൒෼ʹ
    ˔ %#ͷ෼཭
    ˔ ෛՙςετճ໨
    ˓ ೔தʹΦϯϥΠϯͰ࣮ࢪ
    ˓ εϧʔϓοτ͸ഒʹͳͬͯͨ
    ˔ ൓ল
    ˓ ٸʹϦΫΤετ͕૿͑ͨܦݧ͕ॳΊͯͩͬͨ 30
31. ຊ೔ͷ಺༰ ˔ ϚωʔϑΥϫʔυͱΞάϦήʔγϣϯγεςϜͷ঺հ
    ˔ ಥવͷෛՙ૿ͰγεςϜ͕ࢭ·Γ͔͚ͨ࣌ʹͨ͜͠ͱ
    ˔ ࢭ·Βͳ͍Α͏ʹ͢ΔͨΊʹͨ͜͠ͱ
    ˔ ·ͱΊ 31
32. ·ͱΊ ˔ ΞϓϦέʔγϣϯͷੑೳΛ۩ମతͳ਺஋Ͱ೺Ѳ͢Δ
    ˓ ҆ఆՔಇ͢Δͷ͸Ͳͷ͘Β͍͔
    ˓ ҆ఆՔಇ͠ͳ͘ͳΔϘτϧωοΫ͸Կͳͷ͔
    ˔ αʔϏεଆͷΠϕϯτΛ೺Ѳ͓ͯ͘͠ʢίϛϡχέʔγϣϯʣ
    ˓ όοΫΤϯυ͸ಛʹ
    ˔ γεςϜঢ়ଶΛՄࢹԽ͓ͯ͘͠ͱେมศར 32
33. Thank you! 33