APIへのアクセスが急増して慌てた話 / We Should Know our Application Performance

by Takeshi Nakamoto

Slide 1

Slide 1 text

API΁ͷΞΫηε͕ٸ૿ͯ͠߄ͯͨ࿩ 2018/06/29 Minami Aoyama Night#6 தຊ ෢ࢤ 1

Slide 2

Slide 2 text

ࣗݾ঺հ தຊ෢ࢤʢͳ͔΋ͱ͚ͨ͠ʣ גࣜձࣾϚωʔϑΥϫʔυʢʙʣ αʔόʔαΠυΤϯδχΞʢ+BWBʣ ੩Ԭݝॣ౦܊௕ઘொࡏॅ 2

Slide 3

Slide 3 text

௕ઘொ ɾࡾౡӺʙాொӺ໿࣌ؒ ͩ͜·ͷΈ ɾࢠҭͯࢧԉΛܝ͍͛ͯΔ ग़ੜ཰͕੩Ԭݝτοϓ ɾڈ೥ʮ͞Θ΍͔ʯ͕Ͱ͖·ͨ͠ 3

Slide 4

Slide 4 text

ຊ೔ͷ಺༰ ˔ ϚωʔϑΥϫʔυͱΞάϦήʔγϣϯγεςϜͷ঺հ ˔ ಥવͷෛՙ૿ͰγεςϜ͕ࢭ·Γ͔͚ͨ࣌ʹͨ͜͠ͱ ˔ ࢭ·Βͳ͍Α͏ʹ͢ΔͨΊʹͨ͜͠ͱ ˔ ·ͱΊ 4

Slide 5

Slide 5 text

ຊ೔ͷ಺༰ ˔ ϚωʔϑΥϫʔυͱΞάϦήʔγϣϯγεςϜͷ঺հ ˔ ಥવͷෛՙ૿ͰγεςϜ͕ࢭ·Γ͔͚ͨ࣌ʹͨ͜͠ͱ ˔ ࢭ·Βͳ͍Α͏ʹ͢ΔͨΊʹͨ͜͠ͱ ˔ ·ͱΊ 5

Slide 6

Slide 6 text

ϚωʔϑΥϫʔυʹ͍ͭͯ ʮ͓ۚΛલ΁ɻਓੜΛ΋ͬͱલ΁ɻʯͱ͍͏ϛογϣϯʹ΋ͱ͖ͮɺ ݸਓ΍๏ਓɺ͢΂ͯͷਓͷ͓ۚͷ՝୊Λղܾ͢ΔαʔϏεΛఏڙ͍ͯ͠·͢ɻ 6

Slide 7

Slide 7 text

ΞΧ΢ϯτΞάϦήʔγϣϯͱ͸ ిࢠϚωʔ EC ূ݊ ۜߦ ɾ࢒ߴɺೖग़ۚ໌ࡉ 0000-0000-0000-0000 0000-0000-0000-0000 ΫϨδοτΧʔυ ɾ໌ࡉɺར༻࢒ߴ ɾҾམ೔ɾֹ ɾϙδγϣϯ ɾߪೖཤྺ ɾར༻ཤྺ Ϗδωε ɾച্৘ใ 7

Slide 8

Slide 8 text

ΞάϦήʔγϣϯγεςϜͷߏ੒ ΞάϦ%# ΞάϦ ϓϩμΫτ܈ ֤ۚ༥ػؔ : σʔλͷྲྀΕ … BEFORE 8

Slide 9

Slide 9 text

ΞάϦήʔγϣϯγεςϜͷߏ੒ ΞάϦ%# ΞάϦ ϓϩμΫτ܈ ֤ۚ༥ػؔ : σʔλͷྲྀΕ … BEFORE ͍Ζ͍ΖπϥΠʜ 9

Slide 10

Slide 10 text

ΞάϦήʔγϣϯγεςϜͷߏ੒ ΞάϦ%# ΞάϦ ϓϩμΫτ܈ ֤ۚ༥ػؔ : σʔλͷྲྀΕ AFTER ΞάϦ API "1*ܦ༝ʹ౷Ұ … 10

Slide 11

Slide 11 text

ΞάϦήʔγϣϯγεςϜͷߏ੒ ΞάϦ%# ΞάϦ ϓϩμΫτ܈ ֤ۚ༥ػؔ : σʔλͷྲྀΕ AFTER ΞάϦ API … ࠓճ͸ίίͷ࿩ 11

Slide 12

Slide 12 text

ຊ೔ͷ಺༰ ˔ ϚωʔϑΥϫʔυͱΞάϦήʔγϣϯγεςϜͷ঺հ ˔ ಥવͷෛՙ૿ͰγεςϜ͕ࢭ·Γ͔͚ͨ࣌ʹͨ͜͠ͱ ˔ ࢭ·Βͳ͍Α͏ʹ͢ΔͨΊʹͨ͜͠ͱ ˔ ·ͱΊ 12

Slide 13

Slide 13 text

ಥવͷ503 ˔ ಥ೗αʔϏε͔ΒΞϥʔτ͕͘ΔʢΤϥʔϖʔδΛฦ͢ʣ ˓ ͜ͷ࣌఺Ͱ͸ΞάϦ"1*ͷύϑΥʔϚϯε͕ྼԽ͍ͯ͠Δೝࣝͳ͠ ˔ ଞͷ։ൃऀ͕ௐࠪͯ͠ɺΞάϦ"1*͕Ϋοι஗͍ͱ࿈བྷ͕͋Δ ˓ ͜ͷ࣌఺ͰॳΊͯμογϡϘʔυΛ֬ೝ ˔ ݟͨ͜ͱͷͳ͍άϥϑΛ֬ೝ ˓ ୈҰใ͔Β෼΄Ͳܦա -PBE"WFSBHF 13

Slide 14

Slide 14 text

ॳಈͷ൓ল ˔ ϦϦʔε࡞ۀͳͲΛ͍ͯ͠ͳ͍ͷͰ໰୊ͳ͍ͱࢥ͍͜ΜͰ͍ͨ ˓ ͔ͤͬ͘༻ҙ͍ͯ͠ΔμογϡϘʔυ͢Βݟͯͳ͔ͬͨ 14

Slide 15

Slide 15 text

ௐࠪ & ϦϦʔε ˔ /FX3FMJD΍%BUB%PHΛݟͯ%#ίωΫγϣϯपΓͰ٧·ͬͯͦ͏ ˓ %#ෛՙΛ্͛ͳ͍Α͏ߜͬͯಈ͔͍ͯͨ͠ ˔ ͍ͬͨΜϓʔϧ਺Λ૿΍͢ϦϦʔεΛߦ͏ ˔ ϦϦʔε͕׬ྃ͠ɺ"1*͕ਖ਼ৗʹϨεϙϯεΛฦ͢Α͏ʹͳΔ ˓ ͨͩɺϦϦʔεͷӨڹͱ͍͏ΑΓ͸ɺෛՙͷϐʔΫΛա͗ͨ͜ͱ͕େ͖͔ͬͨ ˔ ୈҰใ͔Β࣌ؒ΄ͲͰฏৗ௨Γͷঢ়ଶʹͳͬͨ 15

Slide 16

Slide 16 text

ෆ޾தͷ޾͍ ˔ "1.ʢ/FX3FMJDʣΛ࢖͍ͬͯͨͷͰͱΓ͋͑ͣͷରԠ͕Ͱ͖ͨ ˔ ϝτϦΫεϞχλϦϯάʢ%BUB%PHʣ΋͍ͯͨ͠ͷͰ  ޙ͔ΒͲΜͳঢ়ଶͩͬͨͷ͔Λ؍࡯͢Δ͜ͱ͕Ͱ͖ͨ ˔ Ϩεϙϯε͸஗͘͸ͳ͕ͬͨɺ׬શʹఀࢭ͸͠ͳ͔ͬͨ 16

Slide 17

Slide 17 text

ෛՙ૿ͷݪҼ ˔ .'͕৽͘͠࿈ܞΛ։࢝ͨ͠αʔϏε͔Βͷྲྀೖ૿ ˓ ࿈ܞઌͷϢʔβʔ޲͚ʹΩϟϯϖʔϯ͕ߦΘΕ͍ͯͨ ˓ ࣄલͷڞ༗͕ͪΌΜͱͰ͖ͯͳ͔ͬͨ ˔ ௨ৗ࣌ͷഒ΄ͲͷϦΫΤετ૿ ˓ ϐʔΫ࣌ͷഒ 17

Slide 18

Slide 18 text

ຊ೔ͷ಺༰ ˔ ϚωʔϑΥϫʔυͱΞάϦήʔγϣϯγεςϜͷ঺հ ˔ ಥવͷෛՙ૿ͰγεςϜ͕ࢭ·Γ͔͚ͨ࣌ʹͨ͜͠ͱ ˔ ࢭ·Βͳ͍Α͏ʹ͢ΔͨΊʹͨ͜͠ͱ ˔ ·ͱΊ 18

Slide 19

Slide 19 text

·ͣ͸ௐࠪɺͷલʹ ˔ ࣮͸͜ͷલ೔ʹ΋ߴෛՙʹͳΓαʔϏε͕ෆ҆ఆʹͳ͍ͬͯͨ ˔ ϦΫΤετ૿ՃʹΑΓɺ%#͕஗͘ͳΓɺͭΒΕͯ"1*΋஗͘ͳͬͨ ˔ εϩʔΫΤϦվળ ˔ ࢭΊͯྑ͍ॲཧΛࢭΊΔ ˔ "1*αʔόʔ૿΍͞ͳ͍ͱ -PBE"WFSBHF 19

Slide 20

Slide 20 text

DataDogͷμογϡϘʔυ 20

Slide 21

Slide 21 text

·ͣ͸ௐࠪ ˔ /FX3FMJD΍%BUB%PH΍ΞϓϦέʔγϣϯϩάΛ֬ೝ ˓ %#ͷෛՙ͸ͦΜͳͰ΋ͳ͍ ˓ "1*αʔόʔͷ$16ෛՙ͕ߴ͔ͬͨ ˓ ίωΫγϣϯϓʔϧ͔ΒίωΫγϣϯΛऔಘ͢Δ଴͕ͪ࣌ؒଟ͔ͬͨ ˔ αʔόʔͷੑೳ͕͋·Γߴ͘ͳ͔ͬͨͷͰॲཧ͖͠Εͳ͔ͬͨͱ݁࿦ ˓ εέʔϧΞοϓͱಉ࣌ʹɺ୆਺΋૿΍͢ 21

Slide 22

Slide 22 text

ࠓޙͲ͏͢Δ͔ ˔ ΩϟϯϖʔϯͳͲ͕͋Δͱ͖͸͋Β͔͡Ί࿈བྷͯ͠΋Β͏ ˔ ͕ͩɺࣄલʹڞ༗ͯ͠΋ΒͬͨϦΫΤετ૿ʹ଱͑ΒΕΔͷ͔ʁʁ ˔ ͦ͏ͩɺෛՙςετ͠Α͏ 22

Slide 23

Slide 23 text

ෛՙςετ ˔ϦΫΤετϩάΛ࠶ੜͯ͠୆ͷαʔόʔʹෛՙΛ͔͚Δ ˔ෛՙΛ͔͚Δαʔόʔͷ୆਺Λ૿΍ͯ͠ϦΫΤετ૿Λ࠶ݱ͢Δ ˔͖͍͠஋Λ୳͢ ˓ͲΕ͘Β͍ͷϦΫΤετͳΒීஈͲ͓ΓॲཧͰ͖Δͷ͔ ˓ෛՙ͕૿͑ͨͱ͖ʹͲͷϦιʔε͕࠷ॳʹݶքʹͳΔͷ͔ ˔ςετ͸छྨߦͬͨ ˓%#ίωΫγϣϯ਺ͷͱ͖ʹͲΕ͚ͩॲཧͰ͖Δ͔ ˓%#ίωΫγϣϯ਺ͷͱ͖ʹͲΕ͚ͩॲཧͰ͖Δ͔ 23

Slide 24

Slide 24 text

ෛՙςετ GitHub - tsenart/vegeta: HTTP load testing tool and library ˔ બΜͩཧ༝ ˓ ϦΫΤετϩάΛ࠶ੜͰ͖Δʢ؆୯ʂʣ ˓ ͙͢࢖͑ΔʢόΠφϦஔ͚ͩ͘ʂʣ ˓ $-*Ͱૢ࡞Ͱ͖ΔʢεΫϦϓτͰ੍ޚͰ͖Δʂʣ 24

Slide 25

Slide 25 text

ෛՙςετ ˔ ໷ؒʹຊ൪αʔόʔͰςετ ˓ ࣮ࡍͷαʔόʔͰੑೳΛݟ͔ͨͬͨ ˔ ෛՙΛͩΜͩΜ૿΍͍ͯ͘͠ ● ݁Ռ͸%BUB%PHͰޙ͔Β֬ೝ ˓ ͍͢͝ศརͩͬͨ vegeta API vegeta vegeta … 25

Slide 26

Slide 26 text

ෛՙςετ 100 0 CPUར༻཰ 26

Slide 27

Slide 27 text

ෛՙςετ ● ҆ఆͯ͠ॲཧͰ͖ΔϦΫΤετ਺ͷ্ݶΛ஌ΔͨΊͷςετ ○ ஈ֊తʹෛՙΛ૿΍͢ ○ Ϩεϙϯε͕ѱԽͨ͠Βऴྃ 100 0 CPUར༻ ཰ 27

Slide 28

Slide 28 text

ෛՙςετ ● DBίωΫγϣϯ1ͭͰ҆ఆͯ͠ॲཧͰ͖ΔϦΫΤετ਺ͷ্ݶΛ஌ΔͨΊͷςετ ○ ஈ֊తʹෛՙΛ૿΍͢ ○ Ϩεϙϯε͕ѱԽͨ͠Βऴྃ 100 0 CPUར༻ ཰ 28

Slide 29

Slide 29 text

ෛՙςετͷͦͷޙ ˔ ίωΫγϣϯ਺ͰॲཧͰ͖ΔϦΫΤετ਺͕ग़ͨ ˔ ίωΫγϣϯ਺ͭ͋ͨΓͰॲཧͰ͖ΔϦΫΤετ਺͕ग़ͨ ˓ ίωΫγϣϯ਺෼ͷϦΫΤετΛॲཧͰ͖͍ͯͳ͍ ˔ %#͸·ͩ༨༟͕͋Γͦ͏ ˓ ΍ͬͺΓ$16͕ϘτϧωοΫͬΆ͍ ˓ αʔόʔͷεέʔϧΞοϓ ˓ ແବͳίʔυ͕ͳ͍͔ௐࠪ 29

Slide 30

Slide 30 text

ͦͷޙͰ΍ͬͨ͜ͱ ˔ ෛՙςετͰܾΊ͖͍ͨ͠஋ʹԠͨ͡Ξϥʔτ ˔ ίʔυͷݟ௚͠ ˓ ϨεϙϯελΠϜ͕൒෼ʹ ˔ %#ͷ෼཭ ˔ ෛՙςετճ໨ ˓ ೔தʹΦϯϥΠϯͰ࣮ࢪ ˓ εϧʔϓοτ͸ഒʹͳͬͯͨ ˔ ൓ল ˓ ٸʹϦΫΤετ͕૿͑ͨܦݧ͕ॳΊͯͩͬͨ 30

Slide 31

Slide 31 text

ຊ೔ͷ಺༰ ˔ ϚωʔϑΥϫʔυͱΞάϦήʔγϣϯγεςϜͷ঺հ ˔ ಥવͷෛՙ૿ͰγεςϜ͕ࢭ·Γ͔͚ͨ࣌ʹͨ͜͠ͱ ˔ ࢭ·Βͳ͍Α͏ʹ͢ΔͨΊʹͨ͜͠ͱ ˔ ·ͱΊ 31

Slide 32

Slide 32 text

·ͱΊ ˔ ΞϓϦέʔγϣϯͷੑೳΛ۩ମతͳ਺஋Ͱ೺Ѳ͢Δ ˓ ҆ఆՔಇ͢Δͷ͸Ͳͷ͘Β͍͔ ˓ ҆ఆՔಇ͠ͳ͘ͳΔϘτϧωοΫ͸Կͳͷ͔ ˔ αʔϏεଆͷΠϕϯτΛ೺Ѳ͓ͯ͘͠ʢίϛϡχέʔγϣϯʣ ˓ όοΫΤϯυ͸ಛʹ ˔ γεςϜঢ়ଶΛՄࢹԽ͓ͯ͘͠ͱେมศར 32

Slide 33

Slide 33 text

Thank you! 33