性能テストのいろは

天下一なんちゃらのアレ

Transcript

1. ੑೳςετͷ͍Ζ͸ @jami_i
2. Q : ੑೳςετ΍ͬͯ·͔͢ʁ
3. A : ੑೳςετ΍ͬͯ·͔͢ʁ • ΄ͱΜͲ΍͍ͬͯͳ͍
 (Πϝʔδ) • ඇػೳཁ݅ • ޙճ͠ʹ͞Ε΍͍͢ɾɾɾ KBNJ@J
   ௐ΂
4. ͦ΋ͦ΋ʮੑೳʯͬͯ • γεςϜͷॲཧೳྗ • γεςϜ͕ͲΕ͘Β͍ͷॲཧ = ෛՙʹ଱͑Β ΕΔͷ͔ɻ
5. ੑೳςετͱ͸ ΰʔϧ έʔε γεςϜ͕ͲΕ͘Β͍ͷෛՙʹ଱͑ΒΕΔͷ͔ ԿΛ΋ͬͯ଱͑ΒΕͨͱ͢Δ͔ Ұఆ࣌ؒͰ۠੾ΓఆྔԽͨ͠΋ͷ͕ੑೳཁ݅ͱͳΔ
6. WEBγεςϜͰͷੑೳධՁ
7. ੑೳ਺஋ͷ3ͭͷ࣠ ϦΫΤετ͋ͨΓ ͷॲཧ࣌ؒ
   ϨεϙϯελΠϜ ಉ࣮࣌ߦ਺
   εϧʔϓοτ αʔόʔϦιʔε
   $16
   ϝϞϦ
   ωοτϫʔΫଳҬ ໌֬ͳఆٛΛ͓ͯ͘͜͠ͱ͕େࣄ
8. ϨεϙϯελΠϜ • ΫϥΠΞϯταΠυͰܭଌ͢Δͷ͕Ұൠత • Ԡ౴ʹ࣌ؒͷ͔͔͍ͬͯΔՕॴ͕ͳ͍͔Λ֬ೝ • ϦΫΤετͷૹ৴Λ։͔࢝ͯ͠ΒϨεϙϯε͕ऴྃ͢Δ·Ͱ • ϥ΢ϯυτϦοϓλΠϜ(RTT) • ୹͍΄͏͕ྑ͍
9. ಉ࣮࣌ߦ਺(εϧʔϓοτ) • τϥϯβΫγϣϯ/ඵͰද͢ɻ • τϥϯβΫγϣϯͷҙຯ߹͍͕ᐆດͳͷͰ஫ҙ • PV/sec ͱಉ౳ͱଊ͑Δ৔߹ • ෇ਵ͢ΔϦιʔεϦΫΤετ΋̍ͭͱݟΔ৔߹ • ଟ͍΄͏͕Α͍ → ಉ࣌ʹ͞͹͚ΔϦΫΤετ͕ଟ͍ɻ
10. γεςϜϦιʔε • ᮢ஋௒͑౳ͷো֐Λى͜͞ͳ͍͜ͱΛ֬ೝ͢Δɻ • ؔ࿈͢Δαʔόʔ͢΂ͯͰऔಘ͢Δ΂͖ • CPU, ϝϞϦ, ωοτϫʔΫଳҬ, JavaͳΒεϨου΍ώʔϓ • *statͰऔಘͰ͖Δ(Windows͸λεΫϚωʔδϟʁ) • Ϧιʔεऔಘͷπʔϧ΋͋Δ • Graphite, Jennifer, Oracle Mission Control(JMX), AWSͳΒCould Watch
11. +α • γεςϜతͳੑೳཁ݅ʹՃ͑ͯۀ຿తͳੑೳཁ͕݅ଘࡏ • ਃࠐ/೔ • ϩάΠϯ/ඵ • ग़ྗ/෼ • γεςϜ୲౰Ͱ΋୯७ʹ͸ܾΊΒΕͳ͍Մೳੑ΋ଟ͍
12. ੑೳςετͷ͢͢Ίํ
13. ੑೳςετͷPDCA 1%$"αΠΫϧ
    
    8JLJQFEJB ςετܭը ςετ࣮ࢪ ੑೳ֬ೝ ੑೳվળ
14. 1. ςετܭը
15. ςετܭը • ͲͷΑ͏ͳγφϦΦɾ؀ڥɾߏ੒ͰςετΛߦ͏͔ • ຊ൪؀ڥͰςετ͕Ͱ͖Δͷ͔ɺετϨεπʔϧ͸ԿΛ ࢖͑͹Α͍ͷ͔ • ԿΛܭଌ͍ͨ͠ͷ͔Λ໌֬ʹ͓ͯ͘͠ • ܭଌ஋͔ΒੑೳධՁͰ͖ͳ͍ͱ΍Δҙຯ͕ͳ͍ • ؂ࢹ͢ΔϦιʔε͸Ͳ͏͢Δͷ͔
16. ετϨεπʔϧͷબ୒ • ͲΜͳπʔϧͰෛՙΛ͔͚Δͷ͔ • ιϑτ͚ͩͰͳ͘τϥϑΟοΫδΣωϨʔλͷΑ͏ͳ
 ઐ༻ϋʔυ΋͋Δ • Լهͷ؍఺ͰπʔϧΛબ୒͢Δ • ૝ఆ͢ΔγφϦΦΛ࣮ݱͰ͖Δ͔ • ෛՙޮ཰͸Α͍͔ • ܭଌՄೳͳ਺஋͸ͳʹ͔
17. γφϦΦ࡞੒ • ੑೳཁ݅Λݩʹ࠷ଟͱͳΔಉ࣌ΞΫηε਺΍ػೳ͝ͱͷར༻ൺ཰ͳͲΛߟྀͯ͠਺ύλʔϯ࡞੒ • ૝ఆෛՙ / ݶքෛՙ ͷ྆ํΛݟͨ΄͏͕Α͍ • ϦΫΤετ΍Ωϟογϡͷಈ͖ͳͲۃྗϒϥ΢βͷڍಈʹ߹ΘͤΔ • ςετ࣮ࢪʹύϥϝʔλνϡʔχϯά͢Δ͜ͱ΋ɾɾɾ • ΫϥΠΞϯτଆͰඞཁʹͳΔϦιʔεΛ֬ೝ͓ͯ͘͠ 1000req/sec ͷࢼݧ͕ඞཁͰ1୆͋ͨΓͷ͔͚ΒΕΔෛՙ͕50req/secͷ৔߹ 1000 / 50 = 20 ୆ͷΫϥΠΞϯτ͕ඞཁʹͳΔɻ • ඞͣϨεϙϯεΞαʔγϣϯΛ͢Δ͜ͱ • ΤϥʔϨεϙϯεʹؾ͕ͭ͘͜ͱ͕Ͱ͖ͳ͍
18. ςετσʔλ࡞੒ • ͳΔ΂࣮͘σʔλʹ͍ۙ΄͏͕Α͍ • ͱ͍ͬͯ΋େมͳͷͰ͋Δఔ౓ϥϯμϜʹ͢Δఔ౓ɻ • ಉҰσʔλͩͱDBͷ࣮ߦܭըʹӨڹ͕ͰΔ • όϧΫϩʔμʔ౳Ͱࣄલʹϩʔυ͓ͯ͘͠ • embulkྑ͛͞
19. ςετ࣌ͷߏ੒ྫ 8&# "1 %# ෛՙΫϥΠΞϯτ զʑ
20. 2. ςετ࣮ࢪ
21. ςετ࣮ࢪͷྲྀΕ • ԼهͷྲྀΕΛγφϦΦ͝ͱʹ܁Γฦ͢ ॳظԽ ܭଌ࣮ࢪ ܭଌ஋ͷ౷ܭ ΫϥΠΞϯτىಈ γεςϜϦιʔεऔಘ σʔλϩʔυ γφϦΦϩʔυ 514ͷऔಘ Ϧιʔε֬ೝ ϚΠϧετʔϯ ΫϥΠΞϯτ γεςϜ
22. ॳظԽɾσʔλϩʔυ • σʔλϩʔυޙ͸ඞͣ౷ܭ৘ใΛऔಘ͢Δ͜ͱʂ • ΞʔΧΠϒϩάͷ༰ྔ΋֬ೝ͓͍ͯͨ͠΄͏͕ྑ͍ɻ
23. ෛՙΫϥΠΞϯτͷىಈ • جຊۃݶ·ͰͿΜճ͚ͩ͢ • ܭଌ஋͸อଘͯ͠Ͷ • ཧ૝͸Graphite౳ͷϦΞϧλΠϜϞχλϦϯά Ͱܭଌ͍ͨ͠
24. γεςϜϦιʔεऔಘ • ΫϥΠΞϯτͷϥϯϓΞοϓ͕׬͔ྃͯ͠ΒϦιʔεΛऔΔ • ϓϩμΫτ͸ඞͣຊ൪ͱಉ༷ͷϩάΛऔಘ͢Δɻ • ϩάաଟʹΑΔσΟεΫIO௿ԼɺϚϧνεϨουͷ໰୊౳͕ ൃ֮͢Δ͜ͱ΋͋Δ • gcϩά౳ग़ྗ͢ΔΑ͏ʹ͓͍ͯͨ͠΄͏͕Α͍ -verbose:gc
25. 3. ੑೳ֬ೝ
26. ੑೳ֬ೝ • ΫϥΠΞϯτͷϩά΍αʔόʔΞΫηεϩάͳͲ͔ΒੑೳΛܭࢉ ͢Δ • αʔόʔϦιʔεͷṧഭ͸ͳ͔͔ͬͨ • ಉ࣮࣌ߦ͕ݪҼͱͳΔΤϥʔ͕ൃੜ͍ͯ͠ͳ͍͔ • ۀ຿ྔ͕ੑೳཁ݅ͱͳ͍ͬͯΔ৔߹͸DBͷϨίʔυ਺ͳͲΛΧ΢ ϯτ͢Δ • ੑೳྼԽͷݪҼΛಥ͖ࢭΊΔ
27. 4. ੑೳվળ
28. ۚͰԥΔ • CPUɾϝϞϦΛ૿΍ͦ͏ • SSDʹ͢Ε͹͓̺ • αʔόʔΛ૿΍ͦ͏ • LBΛ΋ͬͱߴੑೳͳػछʹ
29. ͍΍͍΍ͦΜͳ͓ۚͳ͍ ΞϓϦͷνϡʔχϯάͰ͠ΐ͏ • ਖ਼͍͠Ϋϥε͕બ୒͞Ε͍ͯΔ͔(List, Set) • ਖ਼͍࣮͠૷͕બ୒͞Ε͍ͯΔ͔(ArrayList, LinkedList) • ෆཁͳϩοΫ͕ͳ͍͔ • ࠶ؼॲཧͷ຤ඌ࠶ؼʹͳ͍ͬͯΔ͔ • ͳͲͳͲ͋͛ͨΒΩϦ͕ͳ͍
30. ·ͱΊ
31. ੑೳςετ͸ܭը໋͕ • ࣮ࢪ/֬ೝ͸େͨ͠ίετͰ͸ͳ͍ • ໌֬ͳੑೳཁ݅ΛܾΊ͓ͯ͘ εϧʔϓοτ͸100tpsͱ͢Δ εϧʔϓοτ͸ϒϥ΢βͷ̍ϖʔδϩʔυΛ1τϥϯβΫγϣϯͱ͠ɺ100tps Λग़ͤΔΑ͏ʹ͢Δ • ໌֬ͳΩϟογϡઓུΛݐ͓ͯͯ͘ • ੩తϦιʔεͷΩϟογϡઃܭ͸γφϦΦʹӨڹΛ༩͑Δɻ • ෛՙΫϥΠΞϯτͷௐୡ΋େม ⭕️ ❌
32. ੑೳςετͰ࢖͑ͦ͏ͳ πʔϧͨͪ
33. Gatling • AkkaϕʔεͷඇಉظIOΛ࢖ͬͨε τϨεπʔϧ +.FUFSͷఔ౓ͷ$16ෛՙ
    • ScalaDSLͰγφϦΦΛهड़͢Δɻ • HTMLܗࣜͷݟ΍͍͢Ϩϙʔτग़ ྗػೳ class MySimulation extends Simulation { val conf = http.baseUrl("http://localhost") val scn = scenario("Test Senario") .exec(http("index").get("/")) .during(10 minutes) { exec( http("json").get("/json") .check(jsonPath("$.id").saveAs("id")) ) } setUp(scn.inject(atOnceUsers(5))) .protocols(conf) }
34. Twitter ZipKin • ෼ࢄγεςϜ޲͚ϦΫΤεττϨʔεπʔϧ • Ͳͷಈ࡞ʹͲΕ͘Β͍͕͔͔࣌ؒͬͨͷ͔Λෳ਺Ϛγϯ ʹ·͕ͨͬͬͯϩΪϯά͢Δɻ