Upgrade to Pro — share decks privately, control downloads, hide ads and more …

メルペイSREチームのオンコール/oncall-merpay-sre

5292dd0924f5e440a4b7ff40b165a0b4?s=47 tkuchiki
September 02, 2021

 メルペイSREチームのオンコール/oncall-merpay-sre

http://mercari.connpass.com/event/222585/ の発表資料です。

## 資料中のURL一覧

- Merpay Tech Fest 2021_メルペイにおけるSLOの活用事例 - 信頼性を定義しよう: https://speakerdeck.com/mercari/use-case-of-slos-in-merpay-lets-define-reliability
- メルペイのシステム運用とPlaybookの共通管理への挑戦: https://engineering.mercari.com/blog/entry/merpay-operation-and-playbook-challenge/

5292dd0924f5e440a4b7ff40b165a0b4?s=128

tkuchiki

September 02, 2021
Tweet

Transcript

  1. ϝϧϖΠ43&νʔϜͷ Φϯίʔϧ ϝϧϖΠ43&νʔϜ !ULVDIJLJ

  2. w!ULVDIJLJ wϝϧϖΠ43& wೖࣾ 8)0".* 

  3. "HFOEB wϝϧϖΠͷΦϯίʔϧମ੍ wΦϯίʔϧ΁ͷऔΓ૊Έํ wΞϥʔτϩάͷ֬ೝͱڞ༗ w%BTICPBSEͷ֬ೝͱڞ༗ wվળλεΫʹऔΓ૊Ή wΦϯίʔϧվળͷऔΓ૊Έ

  4. ϝϧϖΠͷ Φϯίʔϧମ੍

  5. ϝϧϖΠͷΦϯίʔϧମ੍ .JDSPTFSWJDF .JDSPTFSWJDF .JDSPTFSWJDF .JDSPTFSWJDF 43&

  6. ϝϧϖΠ43&νʔϜ ݱࡏ w໊ w.P.໊ w&.໊ wϝϯόʔ໊ ໊  w಺໊͸άϧʔϓશମͷ1MBUGPSNΛ؅ཧ͍ͯ͠Δ νʔϜʹ೿ݣɺ໊͸ೖࣾ௚ޙ

  7. ϝϧϖΠ43&νʔϜͷΦϯίʔϧମ੍ wϩʔςʔγϣϯ wिؒ wd໊

  8. Φϯίʔϧ΁ͷ औΓ૊Έํ

  9. ϝϧϖΠ43&νʔϜͷΦϯίʔϧ୲౰ऀͷ໾ׂ wΞϥʔτɺΠϯγσϯτରԠ w%FWFMPQFS͔Βͷґཔʹ༏ઌతʹऔΓ૊Ή wΞϥʔτϩάͷ֬ೝɾڞ༗ w%BTICPBSEͷ֬ೝɾؾ͕෇͍ͨ͜ͱͷڞ༗ wվળλεΫʹऔΓ૊Ή

  10. Ξϥʔτϩάͷ֬ೝͱڞ༗ w4MBDLʹ௨஌͞ΕΔΞϥʔτΛ(PPHMF 4IFFUTʹࣗಈऩू ("4  wΦϯίʔϧ୲౰ऀ͕ΞϥʔτʹίϝϯτΛ ͚ͭΔ wேձͰڞ༗

  11. %BTICPBSEͷ֬ೝͱڞ༗ w%BUBEPHͷ%BTICPBSEͰ֤छͷϝτϦΫεΛ ֬ೝ w໰୊ͷ༧ஹ͕ͳ͍͔ w%BUBEPHͷ/PUFCPPLTʹؾ͕͍ͭͨ͜ͱΛ ϝϞ wேձͰڞ༗

  12. ޮՌ wຖ೔Ξϥʔτ΍֤छϝτϦΫεΛڞ༗ wΦϯίʔϧ୲౰࣌ͷΩϟονΞοϓ͕༰қ wϩʔςʔγϣϯதʹަ୅͢Δϋʔυϧ΋Լ͕Δ wυΩϡϝϯτʹه࿥͕࢒ΔͷͰɺޙ͔ΒৼΓ ฦΓ΍͍͢

  13. վળλεΫʹऔΓ૊Ή wΦϯίʔϧத͸ͦΕͧΕͷϝϯόʔͷΤϯδ χΞϦϯά ʹؔΘΔ࡞ۀ͸ߦΘͳ͍ wΦϯίʔϧத͸վળλεΫʹऔΓ૊Ή͜ͱΛݸ ਓͷ໨ඪͷͭͱ͍ͯ͠Δ wΦϯίʔϧ୲౰ऀҎ֎͸ΤϯδχΞϦϯάͷ࡞ ۀʹूத 43&αΠτϦϥΠΞϏϦςΟΤϯδχΞϦϯάΤϯδχΞϦϯάͰ͋ΔͨΊͷ৚݅

  14. ·ͱΊΦϯίʔϧ΁ͷऔΓ૊Έํ w೔ʑ৘ใڞ༗͢Δ͜ͱͰΦϯίʔϧͷҾ͖ܧ ͗Λ༰қʹ͢Δ wΦϯίʔϧதͱͦΕҎ֎ͰϝϦϋϦΛ͚ͭΔ wΦϯίʔϧΛ΍ͬͯɺීஈͷۀ຿΋΍ͬͯͰ ͸ෛ୲͕େ͖͍

  15. Φϯίʔϧվળ ͷऔΓ૊Έ

  16. 4-0Λج४ͱͨ͠Ξϥʔτ w͓٬͞·ʹӨڹ͕͋Δ৔߹ʹͷΈΞϥʔτΛ໐Β͢ wෆཁͳΞϥʔτΛݮΒ͢ wΦϯίʔϧͰർฐ͠ͳ͍Α͏ʹ͢Δ w.FSQBZ5FDI'FTUͷࢿྉࢀর wϝϧϖΠʹ͓͚Δ4-0ͷ׆༻ࣄྫ৴པੑΛఆٛ͠Α͏

  17. 1MBZCPPLͷಋೖ w4-0Λج४ͱͨ͠ΞϥʔτΛ௨஌ wΞϥʔτϝοηʔδʹ1MBZCPPLΛඥ෇͚Δ wΞϥʔτΛड͚औͬͨΦϯίʔϧ୲౰ऀ͕ૉૣ ͘ରԠͰ͖Δ wऔΓ૊Έʹ͍ͭͯ͸ʮϝϧϖΠͷγεςϜӡ ༻ͱ1MBZCPPLͷڞ௨؅ཧ΁ͷ௅ઓʯࢀর

  18. ·ͱΊ

  19. ·ͱΊ wϝϧϖΠͰ͸%FWFMPQFSͱ43&ͰΦϯίʔϧମ੍Λߏங wΦϯίʔϧ୲౰ऀओಋͷ৘ใڞ༗ͰνʔϜશମͰΦϯ ίʔϧ͠΍͍ͯ͘͢͠Δ wΦϯίʔϧ୲౰ऀ͕ΤϯδχΞϦϯάҎ֎ͷ࡞ۀʹूத ͢Δ͜ͱͰෛ୲Λܰݮ w4-0Λج४ͱͨ͠Ξϥʔτͱ1MBZCPPLͷಋೖͰΦϯ ίʔϧͷෛ୲Λܰݮ

  20. ࢀߟࢿྉ w.FSQBZ5FDI'FTU@ϝϧϖΠʹ͓ ͚Δ4-0ͷ׆༻ࣄྫ৴པੑΛఆٛ͠Α͏ wϝϧϖΠͷγεςϜӡ༻ͱ1MBZCPPLͷڞ ௨؅ཧ΁ͷ௅ઓ