デプロイのたびに障害が起こるシステムを安全にした話

by OMOTO Kenji

Slide 1

Slide 1 text

σϓϩΠͷͨͼʹো֐͕ى͜ΔγεςϜΛ ҆શʹͨ͠࿩ Sansan×M3 Tech Night ʙϨΨγʔγεςϜʹཱͪ޲͔͑ʂʙ M3 খຊ݈࢘

Slide 2

Slide 2 text

Slide 3

Slide 3 text

• ϓϩάϥϚʔ̒೥൒ / ΤϜεϦʔ̏೥൒ • ΤϜεϦʔͰ͸ɺج൫։ൃνʔϜ • ෳ਺ࣄۀͰ࢖༻͢ΔαʔϏεͷ։ൃɾӡ༻ • ࣾ಺ͷ։ൃ؀ڥͷվળ • ϓϩάϥϛϯάݴޠ: Python, Ruby, Java, Kotlin, Scalaʢͭ·Γશͯʣ খຊ݈࢘ʢ͓΋ͱ͚Μ͡, doloopwhileʣ

Slide 4

Slide 4 text

ϝʔϧίϯγΣϧδϡ • ಺੡ͷձһ޲͚ϝϧϚΨ഑৴γεςϜ • Ruby on Rails੡ • ߴػೳʢ։෧਺ܭଌɺA/BςετɺαʔϏεؒ࿈ܞͳͲʣ • ຖ݄500ສ௨Ҏ্ͷϝʔϧΛૹ৴ • ॏཁͳϨΨγʔγεςϜ ͚ͩͲɾɾɾ2016೥͝Ζ·Ͱ͸ σϓϩΠ͕ਏ͔ͬͨʂʂ

Slide 5

Slide 5 text

೉͗͢͠ΔσϓϩΠ • αʔόʔʹSSH͠ɺख࡞ۀͰσϓϩΠ • εςοϓ਺͕ଟ͍ • ϦϦʔε಺༰ʹΑͬͯ࡞ۀखॱ͕ҟͳΔ • ࣌ؒత੍໿ʢϝϧϚΨΛࢭΊͯɺͦͷؒʹ࡞ۀ͢Δʣ • खॱ͸υΩϡϝϯτԽ͞Ε͍ͯͳ͍

Slide 6

Slide 6 text

೉͗͢͠ΔσϓϩΠ • αʔόʔʹSSH͠ɺख࡞ۀͰσϓϩΠ • εςοϓ਺͕ଟ͍ • ϦϦʔε಺༰ʹΑͬͯ࡞ۀखॱ͕ҟͳΔ • ࣌ؒత੍໿ʢϝϧϚΨΛࢭΊͯɺͦͷؒʹ࡞ۀ͢Δʣ • खॱ͸υΩϡϝϯτԽ͞Ε͍ͯͳ͍ →৽ਓ͕࡞ۀ͢Δͱඞͣো֐Λى͜͢

Slide 7

Slide 7 text

σϓϩΠͰ๩ͯ͘͠։ൃͰ͖ͳ͍ ੒ޭͨ͠৔߹Ͱ΋ • σϓϩΠத͸഑৴Ͱ͖ͳ͍ͷͰɺεέδϡʔϧௐ੔͕ඞཁ • σϓϩΠ࡞ۀʹ30෼ • σϓϩΠޙͷ֬ೝ࡞ۀʹ15෼ ো֐͕͓͖Δͱ • ௐࠪͱ෮چ࡞ۀʹ30෼ • ૹΕͳ͔ͬͨѼઌʹ࠶ૹ৴͢Δͷʹ̎ɾ̏࣌ؒ • σϓϩΠ͠௚ͨ͢Ίʹɺ΋͏Ұ౓εέδϡʔϧௐ੔

Slide 8

Slide 8 text

ʢσϓϩΠ͢Δͷʹ͕͔͔࣌ؒΔ͔Βʣ ͦΜͳখ͞ͳෆ۩߹Λ௚͢ͷ͸࣌ؒͷແବͰ͠ΐ ౰࣌ݴΘΕͨ͜ͱ

Slide 9

Slide 9 text

͜Μͳͷ͓͔͘͠ͳ͍ʁ @2016೥ य़ Github͸1೔175ճσϓϩΠ͍ͯ͠Δͷʹʂʢ2012೥ࠒͷ਺஋ʣ ΋ͬͱ։ൃ͢Δ͕࣌ؒཉ͍͠ʂ

Slide 10

Slide 10 text

Ͱ΋ɺࠓಈ͍͍ͯΔ΋ͷ͸ࢭΊΒΕͳ͍ • ໌೔΋ɺϝϧϚΨͷ഑৴͕͋Δ • དྷि΋ɺࢪࡦͷͨΊʹػೳΛ௥Ճ͢Δ • དྷ݄΋ɺ৽͍͠ϝϧϚΨΛ௥Ճ͢Δ • ͦ΋ͦ΋ࠓͷঢ়ଶͰԿ͔มߋΛՃ͑Δ͜ͱ͸ةݥʂʂ → ࠓ͋Δ΋ͷΛগͣͭ͠վྑ͢Δ͜ͱʹ

Slide 11

Slide 11 text

σϓϩΠखॱॻΛ࡞ͬͨ サーバーにSSHする cd /app/mail_concierge/mail_concierge/ git pull origin master サーバーを再起動テスト配信する ͦΕ·Ͱͷखॱॻ ۩ମతʹ͸ԿΛ͢Ε͹͍͍ͷʁ ৽ਓʹ͸෼͔Βͳ͍

Slide 12

Slide 12 text

ςετ഑৴͢Δ NBJMDPOUFOUTYMTΛμ΢ϯϩʔυ͢Δ ʮࣄલੜ੒ίϯςϯπʯը໘͔ΒNBJMDPOUFOUTYMTΛΞοϓϩʔυ͢Δ ͜ͷ࣌ʮ೔෇ʯ͸ࠓ೔Λࢦఆ͢Δ ʮ഑৴ొ࿥ʯը໘͔ΒҎԼͷ಺༰Λೖྗ͠ɺʮ഑৴ొ࿥ʯ͢Δ αʔϏεʮ഑৴ςετʯ ϝϧϚΨʮ഑৴ςετʗ)5.-ʯ ϝʔϧςϯϓϨʔτʮσϓϩΠ࣌ࢼݧ഑৴ʯʮσϓϩΠ࣌ࢼݧ഑৴ʯ ഑৴Ϧετʮ഑৴ϦετͷछྨΛબ୒഑৴ςετ༻Ϧετʯ ഑৴໊ʮσϓϩΠ࣌ࢼݧ഑৴::::..%%ʯ ϓϨ഑৴཰ʮʯ উऀܾఆϩδοΫʮ։෧෼ͷΫϦοΫ཰ʯ ϓϨ഑৴։࢝೔࣌ݱࡏ࣌ࠁ͔Β෼ޙ ຊ഑৴։࢝೔࣌ݱࡏ࣌ࠁ͔Β෼ޙ ഑৴ର৅ϥϯΫʮ഑৴ର৅ϥϯΫΛࢦఆ͢Δ/0ʯ ৽͍͠खॱॻ ίϐϖ͢Δ͚ͩͰΑ͍ͷͰɺ୭Ͱ΋҆શʹ࡞ۀͰ͖Δɻ

Slide 13

Slide 13 text

σϓϩΠͷࣗಈԽ • FabricɾCapistranoͳͲ͸࢖Θͳ͔ͬͨ • ϝϯόʔʹ࢖༻ܦݧ͕ͳ͍ʢௐ΂Δ͕࣌ؒ΋͍ͬͨͳ͍ʣ • ࣾ಺Ͱਪ͍ͯ͠Δਓ΋͍ͳ͍ • ΦʔόʔεϖοΫʢॱʹίϚϯυΛ࣮ߦͰ͖Ε͹े෼ʣ • ֤αʔόʔʹஔ͍ͨBashεΫϦϓτΛSSHͰ࣮ߦ͢Δ • ࣗಈԽͰ͖Δͷ͸ɺRubyίʔυͷσϓϩΠͷΈ

Slide 14

Slide 14 text

νΣοΫ࡞ۀͷࣗಈԽ • DB઀ଓͷ֬ೝ • աڈʹDB઀ଓपΓͰো֐͕ଟ͔ͬͨ • ֤DBʹ઀ଓ͠ΫΤϦ͢ΔεΫϦϓτΛ௥Ճ • ςετ഑৴ΛSeleniumͰࣗಈԽ • σϓϩΠޙͷ֬ೝ࡞ۀ͕ෆཁʹͳͬͨ • ࣦഊ࣌ʹ͸௨஌͞ΕΔͷͰσϓϩΠޙ͸์ஔͰOK

Slide 15

Slide 15 text

վྑ & վྑ • εϐʔυΞοϓ • Git ͷϛϥʔϦϯάϨϙδτϦ • Ruby ͷϥΠϒϥϦΛΩϟογϡ • ͨ·ʹߦ͏ख࡞ۀʹ΋πʔϧΛಋೖ • crontab ͷॻ͖׵͑ɿ whenever • DBͷϚελʔσʔλߋ৽ɿ seed_fu

Slide 16

Slide 16 text

σϓϩΠ͸΋͏ා͘ͳ͍ʂ վળʹཁͨ͠ظؒɿ2016೥4݄ʙ12݄ σϓϩΠ࡞ۀ͸5෼Ͱ׬ྃ͠·͢ ϝϧϚΨΛࢭΊΔඞཁ΋͋Γ·ͤΜ ࣄނ͸΄ͱΜͲى͖·ͤΜ ։ൃʹ࣌ؒΛׂ͚ΔΑ͏ʹͳΓ·ͨ͠

Slide 17

Slide 17 text

ͳ্ͥख͍ͬͨ͘ͷ͔ʁ গͣͭ͠ʮࠓ͙͢ޮՌ͕͋Δ΋ͷʯ͔ΒखΛ͚ͭͨ • ʮվળͰ࣌ؒઅ໿ → ༨ͬͨ࣌ؒͰ͞Βʹվળʯ • Ұ౓վળ͢Δͱ৽ͨͳվળ఺͕ݟ͔ͭΔ • ্࢘΍ར༻ऀͱͷަব͕ෆཁͩͬͨ

Slide 18

Slide 18 text

ૣ͍ஈ֊Ͱʮݟ͑ΔԽʯ͢Δͷ͕େࣄ ࠷ॳʹʢෆ֨޷Ͱ΋ʣखॱॻ΍ίʔυΛ࡞ͬͨ • ݟ͑Δ΋ͷ͸վળͰ͖Δ • ϨϏϡʔͰ͖Δ • มߋ͢Ε͹ɺϝϯόʔશһ͕ԸܙΛड͚Δ

Slide 19

Slide 19 text

͝੩ௌ͋Γ͕ͱ͏͍͟͝·ͨ͠ https://m3.recruitment.jp/engineer/ ΤϯδχΞ஥ؒืूதͰ͢