Upgrade to Pro — share decks privately, control downloads, hide ads and more …

ポストモーテムはじめました

nwiizo
February 09, 2023

 ポストモーテムはじめました

ポストモーテムはじめました - 良いポストモーテムを執筆するために必要な5つのポイント というタイトルで登壇してきました。

2023年02月09日
インシデントにどう対応してきたか?みんなで学ぶポストモーテム Lunch LT
https://findy.connpass.com/event/273197/

『ポストモーテムはじめました』というタイトルで登壇しました。 - じゃあ、おうちで学べる
https://syu-m-5151.hatenablog.com/entry/2023/02/09/113316

nwiizo

February 09, 2023
Tweet

More Decks by nwiizo

Other Decks in Programming

Transcript

  1. גࣜձࣾεϦʔγΣΠΫ!OXJJ[P
    ೥݄೔ΠϯγσϯτʹͲ͏ରԠ͖͔ͯͨ͠ʁ֤ࣾͷϙετϞʔςϜ͔ΒֶͿ-VODI-5NJO
    ϙετϞʔςϜ͸͡Ί·ͨ͠
    ྑ͍ϙετϞʔςϜΛࣥච͢ΔͨΊʹඞཁͳͭͷϙΠϯτ

    View Slide

  2. !OXJJ[P
    ݽಠ੒ਓஉੑ
    גࣜձࣾεϦʔγΣΠΫͱ͍͏ձࣾͰιϑτ΢ΣΞ։ൃऀ
    ேɺى͖δϜ΁ߦ͖ຊΛಡΜͰ࢓ࣄΛͯ͠
    ໷ɺ࠶ͼδϜ΁ߦ͖ຊΛಡΜͰ຾Δ͚ͩ

    View Slide

  3. ϙετϞʔςϜͱ͸ʁ

    View Slide

  4. ϙετϞʔςϜͱ͸ʁ
    w ௚༁͢Δͱʮݕࢹʯ·ͨ͸ʮ࢘๏ղ๤ʯͱ͍͏ҙຯΛ࣋ͪ·͢ɻ

    ਓ͕ࢮڈͨ͠ࡍʹɺղ๤͢ΔͳͲͯ͠ࢮҼΛௐ΂ɺ

    ൜ࡑੑͷ༗ແΛ໌Β͔ʹ͢ΔߦҝΛࢦ͢ɻ
    w ଞʹ΋ϓϩδΣΫτϚωδϝϯτͷੈքͰ͸ʮϓϩδΣΫτऴྃޙʹ

    ϓϩδΣΫτશϑΣʔζΛৼฦΔʰࣄޙݕূ ϙετϞʔςϜ
    ʱΛߦ͍·͢

    IUUQTTSFBLFDPNCMPHQPJOUHPPEQPTUNPSUFN
    IUUQTXXXJSBTVUPZBDPNCMPHQPTU@IUNMΑΓ

    View Slide

  5. ϙετϞʔςϜͱ͸ʁ
    w 43&ʹ͓͍ͯ͸ɺαʔϏεӡ༻தʹো֐΍ࣦഊ͕ൃੜ͠
    ͨޙɺʮͻͱ·ͣ໰୊͸ղܾͨ͠͠ɺऩଋ͔ͨ͠Β
    0,ʯͱ͢ΔͷͰ͸ͳ͘ɺݪҼΛ௥ٻ͠࠶ൃ๷ࢭࡦΛ͠
    ͔ͬΓऔΔ͜ͱ͕ॏཁͰ͢ɻ
    w ͦͷͨΊɺʮࣦഊ͔Βֶͼɺಉ͡աͪΛ܁Γฦ͞ͳ͍͜
    ͱʯʹॏ఺Λஔ͍ͨߟ͑ํ΍ࢪࡦͰʮ໰୊ͷىҼͱͳ
    ͬͨΞΫγϣϯΛಛఆ͠ɺͦͷ໰୊Λਖ਼͘͠υΩϡϝϯ
    τԽɺӨڹΛٴ΅͢શͯͷࠜຊݪҼ͕ཧղ͞ΕΔʯͱ͍
    ͏໨తͷ΋ͱऔΓ૊Ήඞཁ͕͋Γ·͢ɻ

    IUUQTTSFBLFDPNCMPHQPJOUHPPEQPTUNPSUFN
    IUUQTXXXPSFJMMZDPKQCPPLT

    View Slide

  6. αʔϏεͷ৴པੑ֊૚

    "SRE αΠτϦϥΠΞϏϦςΟΤϯδχΞϦϯά"

    ਤIII-1 αʔϏεͷ৴པੑͷ֊૚ ΑΓ
    IUUQTTSFHPPHMFTSFCPPLQBSU***QSBDUJDFT
    w αʔϏεͷ৴པੑΛߏங͢ΔͨΊʹ͸ଟ֯తͳ׆ಈ͕ඞཁ
    w 43&͕ߦ͏ͷ͸ɺαʔϏεΛՔಇͤ͞Δ͜ͱɺͦͯ͠࠷ऴతʹ͸αʔϏεͷ৴པੑʹ੹೚Λ
    ࣋ͭ͜ͱͰ͢ɻ͜͜ͰͷαʔϏεͱ͸ɺؔ࿈͢ΔҰ࿈ͷγεςϜ܈Ͱ͋ΓɺϢʔβʔͷͨΊ
    ʹӡ༻͞ΕΔ΋ͷͰ͢ɻͦΕΒʹ͸͞·͟·ͳ׆ಈ͕ඞཁʹͳΓ·͢ɻ
    IUUQTXXXPSFJMMZDPKQCPPLT
    • ΢ΣϒΦϖϨʔγϣϯ ίϥϜू

    • ֤छπʔϧͷ؆୯ͳ঺հ

    • αΠτӡ༻Ͱ࣮ࡍʹ͋ͬͨ࿩ͱͦͷܦҢ

    • ීวతͳ಺༰

    ϝτϦΫε͕େࣄʗސ٬ͱ͸͏·͘෇͖߹͑ʗӡ༻νʔϜͷதͰ΋͏·͘΍Ε

    ࣗಈԽͰ͖Δ͜ͱ͸ࣗಈԽͨ͠ํ͕͍͍/ ܧଓతσϓϩΠ͓͢͢ΊɺͳͲͳͲ
    2011೥05݄ൃߦ ΢ΣϒΦϖϨʔγϣϯ
    ଟ֯తͳ׆ಈ΋ϙετϞʔςϜ΋43&ʹΑͬͯ

    ಥવɺ༙͍ͯग़͖ͯͨߟ͑ํͰ͸ͳ͍ͷ͕Θ͔Δ
    ωοτϫʔΫɾϧʔςΟϯάɾεΠονϯάɾϑΝΠΞ΢Υʔϧɾෛՙ෼ࢄɾߴՄ༻ੑɾো֐෮چɾ5$16%1
    ͷαʔϏεɾ/0$ͷ؅ཧɾϋʔυ΢ΣΞ࢓༷ɾෳ਺ͷ6OJY؀ڥɾෳ਺ͷ΢Σϒαʔόٕज़ɾΩϟογϡٕज़ɾ
    σʔλϕʔεٕज़ɾετϨʔδΠϯϑϥɾ҉߸ٕज़ɾΞϧΰϦζϜɾ܏޲෼ੳɾΩϟύγςΟܭըཱҊͳͲΛ
    ਂ͘ཧղ͍ͯ͠ͳ͚Ε͹ͳΒͳ͍ɻ
    ೥Ҏ্લͷॻ੶͕ͩࡀҎԼ͸ಛʹಡΜͰٕज़ͷมભΛײͨ͡΄͏͕͍͍

    View Slide

  7. αʔϏεͷ৴པੑ֊૚

    "SRE αΠτϦϥΠΞϏϦςΟΤϯδχΞϦϯά"

    ਤIII-1 αʔϏεͷ৴པੑͷ֊૚ ΑΓ
    👆
    ࠓ೔࿩͢͜ͱ
    w αʔϏεͷ৴པੑΛߏங͢ΔͨΊʹ͸ଟ֯తͳ׆ಈ͕ඞཁ
    w ৴པੑΛଌఆ͢Δख๏ͱͯ͠ͷϞχλϦϯά
    w ৴པੑΛճ෮͢Δख๏ͱͯ͠ͷΠϯγσϯτରԠ
    w ৴པੑΛܧଓతʹอޢ͢Δख๏ͱͯ͠ͷͷϙετϞʔςϜࠜຊݪҼ෼ੳʜ
    ϙετϞʔςϜ͸ಠཱ͍ͯ͠Δ֓೦Ͱ͸ͳ͘

    ৴པੑΛकΔҝͷଟ֯తͳ׆ಈͷҰͭͷಓ۩
    IUUQTTSFHPPHMFTSFCPPLQBSU***QSBDUJDFT

    View Slide

  8. ྑ͍ϙετϞʔςϜʹඞཁͳͭͷϙΠϯτ

    View Slide

  9. ϙετϞʔςϜͱ͸ಓ۩Ͱ͋Δ
    w ౴͑ͳ͖࣮ફʹ͍ͭͯ
    w ϙετϞʔςϜ͸ݪଇͰ͸ͳ࣮͘ફͳͷͰ֤૊৫͝ͱʹ౴͕͑ҧ͏౴͕͑ҧ͏ͱݴͬͯ΋

    ͠ΐ͏͕ͳ͍ͷͰ͔͜͜Β͸ྑ͍ϙετϞʔςϜʹ͍ͭͯղઆ͍͖ͯ͠·͢ɻ
    w ϙετϞʔςϜ͕ઈରతͳਖ਼ղͰ͸ͳ͍ ͋͘·Ͱಓ۩
    ɻ૊৫ʹ߹ͬͨ΍Γํ͕ͦ͜ਖ਼ղͰ͢ɻ
    w ࠓݱࡏɺ࠷ڧͷϙετϞʔςϜ͸ܾ·͍ͬͯͳ͍ɻ
    w ࠷ڧ͸ͳ͍͕ྑ͍ϙετϞʔςϜΛࣥච͢ΔͨΊʹߟྀ͢Δͱྑ͍ϙΠϯτ͸͋Δ
    w ໌֬͞
    w ۩ମతͳΞΫγϣϯΞΠςϜ
    w ඇ೉ΛߦΘͳ͍
    w पล΁ͷӨڹ౓ͷਂ͞
    w ଈ࣌ੑͱ؆ܿ͞

    IUUQTTSFHPPHMFTSFCPPLQPTUNPSUFNDVMUVSF

    View Slide

  10. ໌֬͞
    ಡΈख͕ओ୊Λؒҧ͑ͳ͍υΩϡϝϯτ
    ϙετϞʔςϜͱͯ͠ඞཁෆՄܽͳཁૉͰ͋Δ
    ʮ۩ମతͳࣄ৅΍ঢ়گʯʮൃੜݪҼʯʮൃੜ
    ͨ͠Өڹʯʮൃ֮ͱରԠͷܦҢʯ͸͔ͬ͠Γ
    هࡌ͞Ε͓ͯΓɺྑ͍ϙετϞʔςϜͷྫͱ͠
    ͯ࠷దͰ͢ɻ໌֬͞ͱ͍͏఺ʹ͓͍ͯ͸ɺΞΫ
    γϣϯΞΠςϜͷ߲໨Ͱʮ5ZQFʯ͕هࡌ͞Ε
    ͍ͯΔ఺ʹ஫໨͠·͢ɻΞΫγϣϯΞΠςϜͷ
    5ZQF͕ͻͱ໨Ͱ൑அͰ͖Ε͹ɺ୲౰ऀͷׂΓ
    ౰͕ͯ༰қʹͳΓɺΑΓਝ଎ͳ໰୊ղܾʹܨ
    ͕ΔͰ͠ΐ͏ɻ

    IUUQTTSFHPPHMFTSFCPPLFYBNQMFQPTUNPSUFN

    View Slide

  11. ໌֬͞
    ಡΈख͕ओ୊Λؒҧ͑ͳ͍υΩϡϝϯτ
    ʮ4VNNBSZʯ΍ʮ*NQBDUʯͷՕॴͰ͸Πϯ
    γσϯτʹ͍ͭͯͷ༗ӹͳσʔλΛɺఆྔత
    ʹ਺஋Ͱهࡌ͍ͯ͠Δ఺΋ྑ͍఺ͱݴ͑·͢ɻ
    ਺஋σʔλͷಁ໌ੑΛ͠ΊΔͨΊʹΦϦδφϧ
    σʔλ͕֨ೲ͞Ε͍ͯΔιʔε΁ͷϦϯΫͳͲ
    ͕͋ΔͱΑΓΑ͘ͳΔͱߟ͑ΒΕ·͢ɻ
    ͜ͷล͸πʔϧ΍ςϯϓϨʔτͷ׆༻ΛקΊ
    ͍͚ͯΕ͹ͱࢥͬͯ·͢ɻ

    IUUQTTSFHPPHMFTSFCPPLFYBNQMFQPTUNPSUFN

    View Slide

  12. ໌֬͞

    IUUQTTSFHPPHMFTSFCPPLFYBNQMFQPTUNPSUFN
    υΩϡϝϯτͷ৴པੑΛߴΊΔ
    πʔϧ΍ςϯϓϨʔτͷ׆༻ΛקΊΔཧ༝ͱͯ͠͸

    υΩϡϝϯτͷ඼࣭Λߴ͘ͳΔ܏޲͕͋Δ͔ΒͰ͢ɻ

    υΩϡϝϯτͷ඼࣭͕ߴ͍ͱ͸υΩϡϝϯτ͕໨త
    ʹ͔ͳ͍ͬͯΔ͜ͱͰ͋Δͱࢥ͍·͢ɻ
    υΩϡϝϯτͷ඼࣭ʹ͍ͭͯͷ෼ྨ
    ߏ଄඼࣭ߏ੒͕ద੾͔
    ୯ޠϛε͸ͳ͍͔ɺޱௐ͸ͦΖ͍ͬͯΔ͔ɺจ๏͸ਖ਼͍͔͠ͳͲͳͲ
    ػೳ඼࣭υΩϡϝϯτ͕Ͳͷఔ౓༗ޮ͔ɺධՁ͢Δ
    υΩϡϝϯτ͕͋Δ͜ͱʹΑͬͯϏδωεόϦϡʔ͕ൃشͰ͖͍ͯΔ͔
    SREͷ୳ٻ 19ষ υΩϡϝϯτ࡞੒ۀ຿ͷվળ ࢀߟ

    View Slide

  13. ۩ମతͳΞΫγϣϯΞΠςϜ
    ૊৫ͰͲͷΑ͏ʹରԠ͢Δ͔ܾΊ͓ͯ͘
    ۩ମతͳΞΫγϣϯΞΠςϜͷՕॴͰ͸ɺ
    5ZQFʢछྨʣ0XOFSʢ୲౰ʣ#VHʢόάʣ
    ͷ఺͕هࡌ͞Ε͍ͯ·͕͢ɺͦΕʹ
    ʮJNQPSUBODFʢॏཁ౓ʣʯ͕͋ΔͱΑΓྑ
    ͍Ͱ͠ΐ͏ɻΠϯγσϯτ͕ൃੜͨ͠ࡍʹॏཁ
    ౓΍༏ઌॱҐΛଈ࠲ʹ൑அ͢Δͷ͸೉͍ͨ͠Ί
    Ͱ͢ɻ୭͕ͲͷΑ͏ͳ༏ઌॱҐͰΞΫγϣϯ͢
    ΂͖͔൑அͰ͖ΔΑ͏ʹ͓ͯ͘͜͠ͱ͕େ੾Ͱ
    ͢ɻ

    IUUQTTSFHPPHMFTSFCPPLFYBNQMFQPTUNPSUFN

    View Slide

  14. ඇ೉ΛߦΘͳ͍
    ৺ཧతͳ҆શੑΛ୲อ͢Δ
    ϙετϞʔςϜͷจԽͰ͸ʮඇ೉Λ͠ͳ͍
    ࣄʯ͕ඇৗʹॏཁʹͳΓ·͢ɻʮ୭͕ʯͰ͸ͳ
    ͘ʮԿ͕ʯࣦഊΛҾ͖ىͯ͜͠͠·ͬͨͷ͔
    Λ໌֬ʹॻ͘ͱྑ͍Ͱ͠ΐ͏ɻ


    ϙετϞʔςϜΛඇ೉ͷҝͷಓ۩ʹ͢ΔͱҰ
    ॠͰ௠෗Խ͠·͢ɻয఺͸ਓͰ͸ͳ͘ϓϩηε
    ͱٕज़ʹ͋ͯΔ΂͖Ͱ͢ɻϙετϞʔςϜͰ
    ͸ɺਓʑΛʮमਖ਼ʯ͢Δ͜ͱ͸Ͱ͖ͣɺਓʑ͕
    ஔ͔Ε͍ͯΔ؀ڥΛमਖ਼͠ͳ͚Ε͹ͳΒͳ͍
    ͱߟ͑·͢ɻ

    IUUQTTSFHPPHMFTSFCPPLFYBNQMFQPTUNPSUFN
    IUUQTTSFHPPHMFTSFCPPLFYBNQMFQPTUNPSUFN

    View Slide

  15. ඇ೉ΛߦΘͳ͍
    ϙετϞʔςϜจԽΛࠜ෇͔ͤΔͨΊͷࢪࡦ
    w ϙετϞʔςϜʹର͢Δใु
    w ϙετϞʔςϜͷΦʔϓϯͳڞ༗
    w πʔϧ΍ςϯϓϨʔτͷ׆༻
    ͳͲ͕ڍ͛ΒΕ·͢ɻߴ඼࣭ͳϙετϞʔςϜΛࣥච
    ͨ͠ΤϯδχΞʹ͸ใुΛ༩͑ͳ͕Βɺօ͕ੵۃత
    ʹऔΓ૊Ή͜ͱͰ૊৫͕ڧݻʹͳ͍ͬͯ͘࢓૊ΈΛ
    ݕ౼͢Δͱྑ͍Ͱ͠ΐ͏ɻ

    IUUQTTSFHPPHMFTSFCPPLFYBNQMFQPTUNPSUFN
    IUUQTTSFHPPHMFTSFCPPLFYBNQMFQPTUNPSUFN

    View Slide

  16. ඇ೉ΛߦΘͳ͍
    ৺ཧత҆શੑΛଌΔͭͷ࣭໰
    w ϛεΛ͢Δͱඇ೉͞ΕΔ͔
    w ϝϯόʔ͸ࠔ೉ͳ՝୊Λఏى͋͑͠Δ͔
    w ϝϯόʔ͸ҟ࣭ͳ΋ͷΛഉআ͠Α͏ͱ͢Δ͔
    w ϦεΫΛऔΔߦಈΛͯ͠΋҆શͰ͋Δ͔
    w ॿ͚ΛٻΊΔ͜ͱ͸ஏ͔͍͔ͣ͠
    w ୭΋ࣗ෼ͷ࢓ࣄΛҙਤతʹᩫΊΔ͜ͱ͸͠ͳ͍ͱࢥ͑Δ͔
    w ࣗ෼ͷ࠽ೳ͕ଚॏ͞Ε׆͔͞Ε͍ͯΔ͔

    ͜͏࣭ͨ͠໰Ͱ֘౰͢Δ߲໨͕ଟ͍νʔϜ͸ɺʮ҆શͰ͸ͳ͍ʯͱΈͳ͢͜ͱ͕Ͱ͖·͢ɻ

    ҆શͰ͸ͳ͍؀ڥͰϙετϞʔςϜΛ΍͍ͬͯͯ΋͋·ΓՁ஋͕ͳ͍ɻ
    ͢΂ͯͷΠϯγ
    デ
    ϯτ͸ߋʹѱԽ͍ͯ͘͠Մೳੑ
    が
    ͋Δ
    Πϯγσϯτൃੜ࣌ɺӨڹൣғͳͲͷڥքઢ͕໌֬Ͱɺղܾ΁ͷಓے͕ݟ͓͑ͯΓɺम෮ʹ܎
    Δ͕࣌ؒ༧ଌՄೳͰ͋Δ͜ͱ͸ɺ·ͣͳ͍ɻຆͲͷ৔߹Πϯγσϯτ͸ෆ࣮֬ੑͷմͰ͋Δɻ
    γεςϜͷෳࡶੑͱෆ࣮֬ੑ͸૬ؔؔ܎ͰɺγεςϜ͕ෳࡶͰ͋Δ΄Ͳෆ࣮֬ੑ͸૿͢ɻ

    IUUQTXXXBNB[PODPKQEQ#+7%'5
    َ໓ͷਕ
    ޗಕݺੈ੖
    νʔϜ͕ػೳ͢Δͱ͸Ͳ͏͍͏͜ͱ͔ᴷᴷʮֶशྗʯͱʮ࣮ߦྗʯΛߴΊΔ࣮ફΞϓϩʔνΑΓ

    View Slide

  17. पล΁ͷӨڹ౓ͷਂ͞
    ӡ༻ऀͱͯ͠ތΕΔ࢓ࣄΛ
    ΠϯγσϯτͷӨڹ౓߹͍ʹ͍ͭͯ͸ʮਂࠁ౓ʢਂ
    ͞ʣʯʮࠜຊݪҼʯʮτϦΨʔʯʮղܾࡦʯ͕

    ॻ͔Ε͍ͯΔ͜ͱΛ֬ೝ͠·͠ΐ͏ɻ

    ղܾʹ͍ͨΔ·Ͱʹ࢖ΘΕͨιϑτ΢ΣΞͳͲ΋هࡌ
    ͓ͯ͘͠ͱྑ͍ϙετϞʔςϜ͕ग़དྷ্͕Γ·͢ɻ

    ͜Ε·Ͱʹߏஙɺӡ༻ͷதͰ࡞੒ͨ͠ਤ΍υΩϡϝϯ
    τ͕͋Ε͹͜ͷλΠϛϯάͰ༗ޮ׆༻͠·͠ΐ͏ɻ

    IUUQTTSFHPPHMFTSFCPPLFYBNQMFQPTUNPSUFN

    View Slide

  18. ଈ࣌ੑͱ؆ܿ͞
    ϦΞϧλΠϜੑΛେࣄʹ͢Δ
    ୲౰ϝϯόʔ͕λΠϜϥΠϯ্Ͱࣄ৅Λهࡌ͢
    Δ͜ͱͰɺ૬ޓʹίϛϡχέʔγϣϯΛऔͬͯ
    ͍Δͷ͸ྑ͍఺Ͱ͢ɻ

    શͯͷରԠ͕ऴΘͬͨޙͰ͸෼͔Βͳ͔ͬͨ͜
    ͱ͕෼͔Βͳ͘ͳΓ·͢ɻ

    ޙʑɺ࣌ܥྻͰͷࣄ৅֬ೝΛ͢Δ͜ͱ͕Ͱ͖Δ
    ͨΊɺࠣࡉͳΞΫγϣϯͰ΋࢒͓ͯ͘͠ͱඞͣ
    ໾ཱͪ·͢ɻ

    IUUQTTSFHPPHMFTSFCPPLFYBNQMFQPTUNPSUFN
    Ͳͷ࣌఺Ͱ൑அ͕ߦΘΕ͔ͨΛ஌ΕΔͷ͸

    ࠓޙͷӡ༻Λվળ͢Δ্ͰඇৗʹՁ஋͕͋Δ

    View Slide

  19. ࠷ޙʹʜ
    ͜͜·Ͱ͸େ੾ͳص্ͷ࿩Ͱ͢ɻ
    ͜Ε͔Β౴͑ͳ͖࣮ફͷ࿩Λฉ͚ΔಡΊΔ
    ಥવͷ43&8&&,-:

    View Slide

  20. ࢀߟࢿྉ
    w 43&ͱ͸ͳʹ͔
    w IUUQTTSFBLFDPNCMPHXIBUJTTSF
    w ྑ͍ϙετϞʔςϜΛࣥච͢ΔͨΊʹඞཁͳͭͷϙΠϯτ
    w IUUQTTSFBLFDPNCMPHQPJOUHPPEQPTUNPSUFN
    w 43&αΠτϦϥΠΞϏϦςΟΤϯδχΞϦϯά
    w IUUQTXXXPSFJMMZDPKQCPPLT
    w ΢ΣϒΦϖϨʔγϣϯ
    w IUUQTXXXPSFJMMZDPKQCPPLT
    w 1PTUNPSUFN$VMUVSF-FBSOJOHGSPN'BJMVSF
    w IUUQTTSFHPPHMFTSFCPPLQPTUNPSUFNDVMUVSF
    w νʔϜ͕ػೳ͢Δͱ͸Ͳ͏͍͏͜ͱ͔ᴷᴷʮֶशྗʯͱʮ࣮ߦྗʯΛߴΊΔ࣮ફΞϓϩʔνΑΓ
    w IUUQTXXXBNB[PODPKQEQ#/+/12

    View Slide