Canary release in Ieul

Transcript

1. ҆৺ϦϦʔε in ΠΤ΢ʔϧ @suemoc
2. ࣗݾ঺հ • ΠΤ΢ʔϧࣄۀ ΤϯδχΞ • twitter/GitHub/nintendo-ID: suemoc
3. ࠓ೔ͷΰʔϧ ΧφϦΞϦϦʔεͰ҆৺ϦϦʔεͰ͖ΔΒ͍͠
4. ΠΤ΢ʔϧʁ • ෆಈ࢈ҰׅࠪఆαʔϏε • ఏܞࣾ਺ & ૹ٬਺ ۀքτοϓΫϥε
5. ΠΤ΢ʔϧʁ ച্ਪҠ
6. ച্֦େʹΑΔӨڹ CVR͕0.1%Լ͕Δ = ച্໿200ສԁͷଛࣦ / ݄
7. ϦϦʔε͕ා͍
8. ϦϦʔε͕ා͍ • CVʹӨڹ͢ΔΤϥʔͷൃੜ • ϦϦʔεʹΑΔ༧ظͤ͵ϢʔβڍಈͷมԽ • etc… Կ͔ى͖ͨͱ͖ͷࣄۀ΁ͷΠϯύΫτ͕େ͖͘ɺ ҆৺ͯ͠ϦϦʔεͰ͖ͳ͍
9. ϦϦʔεͷϦεΫΛݮΒ͢ʹ͸ʁ • ςετͷॆ࣮ • shadow proxyͰϦϦʔεલʹΤϥʔΛݕग़(ex. kage)
10. ϦϦʔεͷϦεΫΛݮΒ͢ʹ͸ʁ • CVR͕Լ͕ͬͨΒʁ • ૝ఆ֎ͷϢʔβͷڍಈ͕͋ͬͨΒʁ ΋ͬͱࠜຊతʹϦεΫΛݮΒ͍ͨ͠
11. ΧφϦΞϦϦʔε
12. ΧφϦΞϦϦʔεʁ • ݱঢ়όʔδϣϯͱ৽όʔδϣϯͷαʔϏεΛฒྻͯ͠Ϧ Ϧʔε • ஈ֊తʹΞΫηεઌΛ৽όʔδϣϯʹ੾Γସ͑Δ • Կ͔໰୊͕ൃੜͨ͠ΒݱόʔδϣϯʹϩʔϧόοΫ cf. ϒϧʔάϦʔϯσϓϩΠ
13. ΧφϦΞϦϦʔεʁ ग़య: http://martinfowler.com/bliki/CanaryRelease.html
14. ΧφϦΞϦϦʔε in
15. ΧφϦΞϦϦʔε in ΠΤ΢ʔϧ
16. ϦϦʔεϑϩʔ in ΠΤ΢ʔϧ ᶃ STG؀ڥͰςετ ᶄ CANARY؀ڥʹϦϦʔ ε & Ұఆظؒݕূ ᶅ PRODUCTION؀ڥʹϦ Ϧʔε
17. ϦϦʔεͷϦεΫ͸… CVR͕0.1%Լ͕Δ = ച্໿200ສԁͷଛࣦ / ݄ = ച্໿20 ສԁͷଛࣦ / ݄ ϦεΫ͕1/10ʹ௿ݮ
18. গ҆͠৺
19. ΧφϦΞϦϦʔε؀ڥͷߏங
20. ߏங - nginx • ϦΫΤετͷ1/10Λcanary؀ڥʹૹΔ upstream backend { sticky; server 10.6.0.130:9040 weight=9; server 10.6.0.131:9040; # canary }
21. ߏங - ηογϣϯҡ࣋ • Ϣʔβͷηογϣϯҡ͍࣋ͨ͠ • ಉ͡Ϣʔβ͸ಉ͡αʔόʹૹΒΕͯ΄͍͠ • nginxͷsticky sessionΛར༻ (3rd party module) https://bitbucket.org/nginx-goodies/nginx-sticky-module-ng/ overview
22. ߏங - ηογϣϯҡ࣋(༨ஊ) • ॳظ͸nginxͷip_hashΛ࢖͏༧ఆͩͬͨ • ip_hash: IPΞυϨεͰͲͷαʔόʹৼΓ෼͚Δ͔ܾΊΔ • ϥϯσΟϯά → CVͷؒʹIPΞυϨε͕มΘΔϢʔβ͕ 1.5%ଘࡏͨͨ͠Ίɺෆ࠾༻ • ओʹϞόΠϧΞΫηε
23. ࠓ೔ͷΰʔϧ ΧφϦΞϦϦʔεͰ҆৺ϦϦʔεͰ͖ΔΒ͍͠
24. ิ଍ - ΧφϦΞϦϦʔε͕ಋೖ͠ʹ͍͘αʔϏε • Ϧϐʔλʔ͕ॏཁͳαʔϏε (ΠΤ΢ʔϧ͸΄΅৽نϢʔβͷΈ) • ༗ྉαʔϏε
25. ͝ਗ਼ௌ͋Γ͕ͱ͏͍͟͝·ͨ͠