NewsDigestの開発を支える足回り: CI/CDと障害対応

「BPStudy#169〜JX通信社を支える技術/速報サービスのエンジニアリングとチームのひみつ」でお話ししたものです

Transcript

1. NewsDigestͷ։ൃΛࢧ͑Δ଍ճΓ CI / CDͱো֐ରԠ ฏ੉ ୡ໵
2. ฏ੉
   ୡ໵
   !5BUDI/JDPMBT
   ೥͔Β+9௨৴ࣾɻ 
 
 1ZUIPO(PͰαʔόαΠυ։ൃͨ͠Γɺ "84($1্Ͱ؀ڥ੔͑ͨΓͯ͠·͢ɻ
   ӳޠͱதࠃޠ͕ͪΐͬͱ͚ͩ࿩ͤ·͢ɻ
   
   ࣗݾ঺հ
3. w ࿩͢͜ͱ
   w πʔϧ΍࢓૊Έͷ໨త
   w ͦͷഎܠʹ͋Δ+9ͷจԽ 
 w ࿩͞ͳ͍͜ͱ
   w ݸผͷπʔϧͷ࢖͍ํ
   w αϯϓϧίʔυ 
   ͸͡Ίʹ
4. "HFOEB 1. CI/C D 1.1. ύΠϓϥΠϯ։࢝ɺͦͷલʹ 1.2. σϓϩΠπʔϧ 1.3. γʔΫϨοτ؅ཧ 2. ো֐ରԠ 2.1. ৘ใͷऩूͱ੔ཧ 2.2. ରԠͷ඼࣭Λఈ্͛͢Δ޻෉
5. εϐʔσΟͳ։ൃͷͨΊʹ $*$% 1
6. 
   ύΠϓϥΠϯ։࢝ɺͦͷલʹ ίϛοτલͷ͋Ε͜ΕΛ࢓૊ΈͰकΔ w 1ZUIPOͷίʔυϑΥʔϚοτ
   CMBDL
   w ϧʔϧ͕ݫ͘͠ɺઃఆͷ༨஍͕ͳ͍೰Ή༨஍΋ͳ͍
   w ͦΕͬͯ1ZUIPOJDͰ͸ʁ
   w 5IFSF
   TIPVME
   CF
   POF
   BOE
   QSFGFSBCMZ
   POMZ
   POF
   PCWJPVT
   XBZ
   UP
   EP
   JU
   
 ੿༁
   ͳΔ΂͘ɺ͋Δ͜ͱΛ੒͢ํ๏͸Ұ͚ͭͩͰ͋Δ΂͖
   w ίϛοτલͷࣗಈద༻
   QSFDPNNJU
   w $*Ͱ΋νΣοΫ͸ͯ͠Δ͕ɺͦΕͰ1JQFMJOF͕͚͜Δͷ͸࣌ؒͷແବ
   w ϩʔΧϧ؀ڥͷγʔΫϨοτ؅ཧ
   UFMMFS
   
   HJUTFDSFU
7. 
   ύΠϓϥΠϯ։࢝ɺͦͷલʹ ίϛοτલͷ͋Ε͜ΕΛ࢓૊ΈͰकΔ UFMMFS
8. 
   σϓϩΠπʔϧ 044ͷྗΛआΓͯ$*ఆٛͷهड़ྔΛݮΒ͢ w &$4
   FDTQSFTTP
   w طଘͷ&$4αʔϏεΛΠϯϙʔτͯ͠ಋೖͰ͖Δ
   w -BNCEB
   TFSWFSMFTT
   GSBNFXPSL
   w ෳ਺؀ڥͷઃఆ΋ͭͷ:".-ϑΝΠϧͰ׬݁͢Δ "84
   $-*Λͦͷ··࢖͏ΑΓ΋ந৅౓͕ߴ͍
9. 
   σϓϩΠͷݖݶ؅ཧ Ұ࣌తͳݖݶΛ࡞ͬͯ͸ফ͢ w 7BVMU
   w "84Λ$*͔Β৮ΔݖݶΛूத؅ཧ
   w *".ϢʔβͷҰ࣌ൃߦ͕Ͱ͖Δ
   
10. 
    σϓϩΠͷݖݶ؅ཧ Ұ࣌తͳݖݶΛ࡞ͬͯ͸ফ͢ w (JU-BC
    $*
    w QSF
    
    QPTU
    ಛघͳεςʔδɺඞͣ࠷ॳͱ࠷ޙʹಈ͘
    w ύΠϓϥΠϯ࣮ߦ࣌ʹ+85Λൃߦͯ͠ɺ7BVMUʹೝূΛ௨ͤΔ
    w ʮ͜ͷϦϙδτϦ͸ɺ͜ͷ"84ΞΧ΢ϯτͷɺ͜ͷݖݶηοτͶʯ
11. ߈Ί΋कΓ΋ ো֐ରԠ 2
12. 
    ৘ใͷऩूͱ੔ཧ ৘ใͷछྨʹΑͬͯπʔϧΛ࢖͍෼͚Δ w ઐ༻ͷ࢖͍ࣺͯ4MBDLνϟϯωϧ
    w /PUJPOʹΑΔλεΫ؅ཧɾه࿥
13. 
    ৘ใͷऩूͱ੔ཧ ઐ༻ͷ࢖͍ࣺͯ4MBDLνϟϯωϧ • #incident-2021-09-30-database-slow-respons e w ϝϦοτ
    w ো֐νϟϯωϧ͕࡞੒͞Εͯট଴͞ΕΔ
    
    ʮΉΉɺԿ͔͋ͬͨͳʯ
    w ΞʔΧΠϒ͞ΕΔ
    
    ղܾͨ͠ͱ͍͏ϚʔΫʹͳΔ
    w ॻ͖ԥΓ΍͍͢
    
    ࣗવͱ࣌ܥྻʹͳΔ
    w σϝϦοτ
    w ࣌ܥྻͰ͸͋Δ͕ɺ࿩୊͕ೋసࡾసͯ͠৘ใͷ·ͱ·Γ͕ͳ͍
    w ฒߦͯ͠ಈ͍ͯΔௐࠪɾ࡞ۀͷશମ૾͕ݟ͑ʹ͍͘
14. 
    ৘ใͷऩूͱ੔ཧ /PUJPOͰ৘ใ੔ཧͱλεΫͷ؅ཧ w ͲΜͳো֐Ͱ΋ඞͣ΍Δ͜ͱΛνΣοΫϘοΫεʹ͢Δ
    w SVOCPPL΍खॱॻΑΓ΋େ͖Ίͷཻ౓
    w ॳಈɾऴྃ࣌ͷಈ͖͕த৺
    w ྫ
    νϟϯωϧ࡞੒ؔ܎ऀ࿈བྷӨڹൣғ֬ೝ
    w ਐߦதͷௐࠪɾ࡞ۀλεΫΛΧϯόϯͰ؅ཧ
    w ʮ֬ఆɾ࠷৽৘ใʯ͕ཷ·͍ͬͯ͘
    
    ͋ͱͰͦͷ··ݟฦͤΔࢿྉʹͳΔ
    w ޙ͔Βདྷͨਓʹͱͬͯ͸ʮࠓ͖ͨɺࡾߦͰঢ়گڭ͑ͯʯʹͳΔ 

15. 
    ৘ใͷऩूͱ੔ཧ /PUJPOͰ৘ใ੔ཧͱλεΫͷ؅ཧ
16. 
    ରԠͷ඼࣭Λఈ্͛͢Δ޻෉ ʮ΋͠ɺଞͷਓ͕౰ͨͬͨΒྨࣅ͕ൃੜͨ͠Βʜʯ w ো֐ରԠ͕ऴΘͬͨ࣌఺Ͱɺ/PUJPO্ʹͦͦ͜͜੔ཧ͞Ε͍ͯΔ
    w ྨࣅͷো֐Λ๷͙ىͬͨ͜ͱ͖ʹରԠ͢ΔͷώϯτʹͳΔ
    w ϙετϞʔςϜ
    w ۩ମతͳো֐ͷݪҼɾ߃ٱରԠ
    w ো֐ରԠͦͷ΋ͷʹ͍ͭͯͷվળ
    w ʮ΍ͬͺΓॳಈͷ͜͜ม͑·ͤΜʁʯʮղࢄલʹ99ͨ͠΄͏͕Αͦ͞͏ʁʯ
    w νʔϜͱͯ͠ςϯϓϨΛҭ͍ͯͯ͘จԽʹ
17. 
    ·ͱΊ εϐʔυ͕ٻΊΒΕΔνʔϜ͔ͩΒͦ͜ɺ
    ʮߟ͑ͳ͍Ͱ͍͍͜ͱʯΛ಄͔ΒͲΜͲΜ௥͍ग़͢
18. 5IBOL:PV