メルペイSREチームのオンコール/oncall-merpay-sre

http://mercari.connpass.com/event/222585/ の発表資料です。

## 資料中のURL一覧

- Merpay Tech Fest 2021_メルペイにおけるSLOの活用事例 - 信頼性を定義しよう: https://speakerdeck.com/mercari/use-case-of-slos-in-merpay-lets-define-reliability
- メルペイのシステム運用とPlaybookの共通管理への挑戦: https://engineering.mercari.com/blog/entry/merpay-operation-and-playbook-challenge/

Transcript

1. ϝϧϖΠ43&νʔϜͷ
   Φϯίʔϧ ϝϧϖΠ43&νʔϜ
   !ULVDIJLJ
2. w!ULVDIJLJ
   wϝϧϖΠ43&
   w
   ೖࣾ 8)0".* 
3. "HFOEB wϝϧϖΠͷΦϯίʔϧମ੍
   wΦϯίʔϧ΁ͷऔΓ૊Έํ
   wΞϥʔτϩάͷ֬ೝͱڞ༗
   w%BTICPBSEͷ֬ೝͱڞ༗
   wվળλεΫʹऔΓ૊Ή
   wΦϯίʔϧվળͷऔΓ૊Έ
4. ϝϧϖΠͷ
   Φϯίʔϧମ੍
5. ϝϧϖΠͷΦϯίʔϧମ੍ .JDSPTFSWJDF .JDSPTFSWJDF .JDSPTFSWJDF .JDSPTFSWJDF 43&
6. ϝϧϖΠ43&νʔϜ 
   ݱࡏ w໊
   w.P.
   ໊
   w&.
   ໊
   wϝϯόʔ
   ໊ ໊
   w಺໊͸άϧʔϓશମͷ
   1MBUGPSN
   Λ؅ཧ͍ͯ͠Δ νʔϜʹ೿ݣɺ໊͸ೖࣾ௚ޙ
7. ϝϧϖΠ43&νʔϜͷΦϯίʔϧମ੍ wϩʔςʔγϣϯ
   wिؒ
   wd໊
8. Φϯίʔϧ΁ͷ
   औΓ૊Έํ
9. ϝϧϖΠ43&νʔϜͷΦϯίʔϧ୲౰ऀͷ໾ׂ wΞϥʔτɺΠϯγσϯτରԠ
   w%FWFMPQFS͔Βͷґཔʹ༏ઌతʹऔΓ૊Ή
   wΞϥʔτϩάͷ֬ೝɾڞ༗
   w%BTICPBSEͷ֬ೝɾؾ͕෇͍ͨ͜ͱͷڞ༗
   wվળλεΫʹऔΓ૊Ή
10. Ξϥʔτϩάͷ֬ೝͱڞ༗ w4MBDLʹ௨஌͞ΕΔΞϥʔτΛ
    (PPHMF
    4IFFUT
    ʹࣗಈऩू ("4
    wΦϯίʔϧ୲౰ऀ͕ΞϥʔτʹίϝϯτΛ ͚ͭΔ
    wேձͰڞ༗
11. %BTICPBSEͷ֬ೝͱڞ༗ w%BUBEPHͷ%BTICPBSEͰ֤छͷϝτϦΫεΛ ֬ೝ
    w໰୊ͷ༧ஹ͕ͳ͍͔
    w%BUBEPH
    ͷ
    /PUFCPPLT
    ʹؾ͕͍ͭͨ͜ͱΛ ϝϞ
    wேձͰڞ༗
12. ޮՌ wຖ೔Ξϥʔτ΍֤छϝτϦΫεΛڞ༗
    wΦϯίʔϧ୲౰࣌ͷΩϟονΞοϓ͕༰қ
    wϩʔςʔγϣϯதʹަ୅͢Δϋʔυϧ΋Լ͕Δ
    wυΩϡϝϯτʹه࿥͕࢒ΔͷͰɺޙ͔ΒৼΓ ฦΓ΍͍͢
13. վળλεΫʹऔΓ૊Ή wΦϯίʔϧத͸ͦΕͧΕͷϝϯόʔͷΤϯδ χΞϦϯά ʹؔΘΔ࡞ۀ͸ߦΘͳ͍
    wΦϯίʔϧத͸վળλεΫʹऔΓ૊Ή͜ͱΛݸ ਓͷ໨ඪͷͭͱ͍ͯ͠Δ
    wΦϯίʔϧ୲౰ऀҎ֎͸ΤϯδχΞϦϯάͷ࡞ ۀʹूத
    43&
    αΠτϦϥΠΞϏϦςΟΤϯδχΞϦϯά
    
    ΤϯδχΞϦϯάͰ͋ΔͨΊͷ৚݅
    
14. ·ͱΊ
    
    Φϯίʔϧ΁ͷऔΓ૊Έํ w೔ʑ৘ใڞ༗͢Δ͜ͱͰΦϯίʔϧͷҾ͖ܧ ͗Λ༰қʹ͢Δ
    wΦϯίʔϧதͱͦΕҎ֎ͰϝϦϋϦΛ͚ͭΔ
    wΦϯίʔϧΛ΍ͬͯɺීஈͷۀ຿΋΍ͬͯ
    Ͱ ͸ෛ୲͕େ͖͍
15. Φϯίʔϧվળ
    ͷऔΓ૊Έ
16. 4-0Λج४ͱͨ͠Ξϥʔτ w͓٬͞·ʹӨڹ͕͋Δ৔߹ʹͷΈΞϥʔτΛ໐Β͢
    wෆཁͳΞϥʔτΛݮΒ͢
    wΦϯίʔϧͰർฐ͠ͳ͍Α͏ʹ͢Δ
    w.FSQBZ
    5FDI
    'FTU
    ͷࢿྉࢀর
    wϝϧϖΠʹ͓͚Δ4-0ͷ׆༻ࣄྫ
    
    ৴པੑΛఆٛ͠Α͏
17. 1MBZCPPL
    ͷಋೖ w4-0Λج४ͱͨ͠ΞϥʔτΛ௨஌
    wΞϥʔτϝοηʔδʹ
    1MBZCPPL
    Λඥ෇͚Δ
    wΞϥʔτΛड͚औͬͨΦϯίʔϧ୲౰ऀ͕ૉૣ ͘ରԠͰ͖Δ
    wऔΓ૊Έʹ͍ͭͯ͸ʮϝϧϖΠͷγεςϜӡ ༻ͱ1MBZCPPLͷڞ௨؅ཧ΁ͷ௅ઓʯࢀর
18. ·ͱΊ
19. ·ͱΊ wϝϧϖΠͰ͸%FWFMPQFSͱ43&ͰΦϯίʔϧମ੍Λߏங
    wΦϯίʔϧ୲౰ऀओಋͷ৘ใڞ༗ͰνʔϜશମͰΦϯ ίʔϧ͠΍͍ͯ͘͢͠Δ
    wΦϯίʔϧ୲౰ऀ͕ΤϯδχΞϦϯάҎ֎ͷ࡞ۀʹूத ͢Δ͜ͱͰෛ୲Λܰݮ
    w4-0Λج४ͱͨ͠Ξϥʔτͱ1MBZCPPLͷಋೖͰΦϯ ίʔϧͷෛ୲Λܰݮ
20. ࢀߟࢿྉ w.FSQBZ
    5FDI
    'FTU
    @ϝϧϖΠʹ͓ ͚Δ4-0ͷ׆༻ࣄྫ
    
    ৴པੑΛఆٛ͠Α͏
    wϝϧϖΠͷγεςϜӡ༻ͱ1MBZCPPLͷڞ ௨؅ཧ΁ͷ௅ઓ