Upgrade to Pro — share decks privately, control downloads, hide ads and more …

たまに起きる外部サービスの障害に備えたり備えなかったりする話

Avatar for Sohei Iwahori Sohei Iwahori
December 18, 2025
Technology
710
1

 たまに起きる外部サービスの障害に備えたり備えなかったりする話

Avatar for Sohei Iwahori

Sohei Iwahori

December 18, 2025

More Decks by Sohei Iwahori

See All by Sohei Iwahori
eBPF Can Do It! A 5-Minute Tour of 5 Real-World PHP Issues Solved with eBPF
Avatar for Sohei Iwahori egmc
0
450
本番環境でPHPコードに触れずに「使われていないコード」を調べるにはどうしたらよいか？
Avatar for Sohei Iwahori egmc
3
730
SREのためのeBPF活用ステップアップガイド
Avatar for Sohei Iwahori egmc
3
5.5k
eBPFと周辺技術を利用してPHPアプリケーションコードを変更しない可視化をやってみる
Avatar for Sohei Iwahori egmc
1
86
PHPアプリケーションにおけるeBPFの使い所
Avatar for Sohei Iwahori egmc
1
1.5k
Building Dashboards as a Hobby
Avatar for Sohei Iwahori egmc
0
990
Runbookに何を書き、どのようにアラートを振り分けるか？
Avatar for Sohei Iwahori egmc
2
4.8k
プロダクション環境の信頼性を損ねず観測する技術
Avatar for Sohei Iwahori egmc
9
9.8k
practices-for-making-alerts-actionable.pdf
Avatar for Sohei Iwahori egmc
3
8.6k

Other Decks in Technology

See All in Technology
FDE という解 ― 暗黙知と明示知をつなぐ、伴走型エンジニアリング ―
Avatar for 太田 博三 otanet
0
120
ポケモンの型をTypeScriptの型システムで表現してみた
Avatar for subroh_0508 subroh0508
0
360
AGENTS.mdとSkillsで始めるAIエージェント活用
Avatar for そのだ sonoda_mj
2
180
AIソロプレナー時代に2ヶ月で20人増員した事業創造会社の開発組織の話
Avatar for Koji Miyata miyatakoji
0
530
白金鉱業Meetup_Vol.24_「AIエージェントは分けるほど良い」は本当か？ / Is it true that “the more you divide AI agents, the better”?
Avatar for BrainPad brainpadpr
1
150
Claude Code の Sandbox 機能を Anthropic Sandbox Runtime(srt) で試そう！/lets-play-anthropic-sandbox-runtime
Avatar for tomoki10 tomoki10
1
510
社内 AI エージェント Synapse と セマンティックレイヤーの育て方
Avatar for Hiroaki Sano hiroakis
1
1.5k
2026TECHFRESH畢業分享會 - Lightning Talk - 打造精準高效的 MCP 設計模式與測試實務
Avatar for LINE Developers Taiwan line_developers_tw
PRO
0
610
AIっぽい文章を採点して人間らしく直すアプリを作ってみた
Avatar for Yuuki Yamashita yama3133
2
110
AIの性能が向上しても未解決な組織の重大問題は何か?/An Unsolved Organizational Problem in the Age of AI
Avatar for moriyuya moriyuya
3
590
protovalidate-es を導入してみた
Avatar for 弁護士ドットコム bengo4com
0
160
[モダンアプリ勉強会]今更聞けないGit/GitHub入門
Avatar for つくぼし tsukuboshi
0
360

Featured

See All Featured
Taking LLMs out of the black box: A practical guide to human-in-the-loop distillation
Avatar for Ines Montani inesmontani
PRO
3
2.3k
"I'm Feeling Lucky" - Building Great Search Experiences for Today's Users (#IAC19)
Avatar for Dan Newman danielanewman
231
23k
Visual Storytelling: How to be a Superhuman Communicator
Avatar for David Neal reverentgeek
2
550
Joys of Absence: A Defence of Solitary Play
Avatar for Sebastian Deterding codingconduct
1
390
Why You Should Never Use an ORM
Avatar for John Nunemaker jnunemaker
PRO
61
9.9k
Navigating Weather and Climate Data
Avatar for Ryan Abernathey rabernat
0
220
Optimizing for Happiness
Avatar for Tom Preston-Werner mojombo
378
71k
Practical Orchestrator
Avatar for Shlomi Noach shlominoach
191
11k
Practical Tips for Bootstrapping Information Extraction Pipelines
Avatar for Matthew Honnibal honnibal
25
1.9k
The Cost Of JavaScript in 2023
Avatar for Addy Osmani addyosmani
55
10k
Organizational Design Perspectives: An Ontology of Organizational Design Elements
Avatar for Dr. Kim W Petersen kimpetersen
PRO
1
720
A Modern Web Designer's Workflow
Avatar for Chris Coyier chriscoyier
698
190k

Transcript

  1. ͨ·ʹى͖Δ֎෦αʔϏεͷো֐ʹ උ͑ͨΓඋ͑ͳ͔ͬͨΓ͢Δ࿩ 2025/12/12 ΏΔSREษڧձ #14 Sohei Iwahori (GREE, Inc.)

  2. who? » Sohei Iwahori (@egmc) » גࣜձࣾάϦʔ ΠϯϑϥετϥΫνϟ෦ γχΞϦʔυΤϯδχΞ »

    Πϯϑϥͱ؂ࢹγεςϜ » SRE NEXT 2025 Co-ChairʢͰͨ͠ʣ » eBPF Japan MeetupӡӦ

  3. Q:ͨ·ʹى͖Δ֎෦αʔϏεͷো֐ is Կ A:PagerDuty͕μ΢ϯͨ͠ɺͱ͔ͦ͏͍͏΍ͭͰ͢

  4. ͜ͷτʔΫͰಘΒΕΔ͔΋͠Εͳ͍͜ͱ » ֎෦ͷαʔϏεͷো֐ʹରͯ͠Ͳͷఔ౓ͲͷΑ͏ʹඋ͑Δͷ͔ͷώϯτ » كʹݟམͱ͕ͪ͠ͳܦ࿏ʹ͍ͭͯߟ͑Δ » օ͞ΜͲͷఔ౓Ͳ͏ͯ͠·͢ʁͱ͍͏ͷΛฉ͘ʢࢲ͕ʣ » ʢ֎෦ͷαʔϏε͕μ΢ϯͯ͠΋׬ᘳʹγεςϜΛकΓ·͠ΐ͏ɺͰ͸ͳ ͍ʣ

  5. ΞδΣϯμ » ࣄྫΛ࿩͢ » 2021/10 Grafana Cloud » 2025/08 PagerDuty

    » 2025/11 Cloudflare » ͦͷଞͷώϯτʹ͍ͭͯ࿩͢ » ϩέʔγϣϯΛόϥ͢ઓུ » ೝূج൫ͷαʔϏε͕ར༻ෆՄʹͳͬͨΒʁ » ϝʔϧαʔόΛΦϯϓϨ͔ΒΫϥ΢υ΁Ҡߦͨ࣌͠ͷձ࿩ » ·ͱΊ

  6. ࣄྫΛ࿩͢

  7. 2021/10 Grafana Cloud » Grafana Cloudͷ2࣌ؒͷμ΢ϯ » ΦϯϓϨଆͷγεςϜଆͰো֐ʹͳͬͨ » SRE

    NEXT 2022Ͱ࿩ͯ͠·͢1 » ͜Ε͸උ͍͑ͯͳ͔ͬͨέʔε 1 ϓϩμΫγϣϯ؀ڥͷ৴པੑΛଛͶͣ؍ଌ͢Δٕज़ https://sre-next.dev/2022/schedule/#jp32

  8. Ͳ͏͢Ε͹Α͔͔ͬͨ » ՄೳͳݶΓࣄલʹྫ֎ܥ΋ಈ͔͓͚ͯ͠ΔͱΑ͍ » ΤʔδΣϯτࣗମͷMonitoring΋Մೳ͕ͩ͜Ε͸͜ΕͰେม » ͳΜΒ͔ผܦ࿏Ͱҟৗݕ஌͕Ͱ͖͍ͯΔͱΑ͍

  9. 2025/08 PagerDuty » PagerDutyͷো֐ʹΑΔΞϥʔτ഑ૹ஗Ԇ » 24/365ͷҰ࣍ରԠνʔϜ͕͍ΔͷͰͦͪ ΒͰٵऩ » جຊతʹ͸૝ఆࡁͳͷͰͦͷΑ͏ʹରԠ ͞Εͨ

  10. Ͳ͏͍ͯ͠Δ͔ » ಺੡ͷΞϥʔτ؂ࢹγεςϜʢAWSͰ৑௕ߏ੒ͰՔಇʣ͔ΒSlack/ PagerDuty/ͦͷଞͷνϟϯωϧ΁ͷ௨஌ΛAPIܦ༝Ͱߦ͍ͬͯΔ » ΫϦςΟΧϧͳΞϥʔτ௨஌͸2ܥ౷ͷܦ࿏Λ༻ҙ͢ΔΑ͏ʹ͍ͯ͠Δ » ྺ࢙తഎܠͱͯ͠͸ΦϯϓϨͷ࣌୅͔Β24/365ӡ༻νʔϜ͕͍ΔͨΊɺͦͷ ӡ༻Λ૝ఆΛ͍ͯ͠Δ

  11. 2025/11 Cloudflare » Cloudflareͷμ΢ϯ » CDNͱͯ͠͸ར༻͍ͯ͠ͳ͍͕Ұ෦ͷίϯςφΠϝʔ δͷऔಘͳͲͰӨڹ » ༧૝ͯ͠ͳ͔ͬͨͱ͜Ζͱͯ͠Grafana CloudͷҰ෦

    ͷελοΫ͕ӾཡෆՄʹͳͬͨ

  12. Ͳ͏͢Δ΂͖͔ » Πϝʔδܥ͸جຊతʹϓϧεϧʔΩϟογϡಋೖͳͲʢେମ΍ͬͯ͸͍ͨ » SaaS͕࢖ͬͯΔCDN·Ͱ͸ਖ਼௚ҙࣝ͠ͳͯ͘ྑ͍ͱࢥ͏ » ͜Ε͸ϩέʔγϣϯઓུͷํͰ

  13. ͦͷଞͷώϯτʹ͍ͭͯ࿩͢

  14. ϩέʔγϣϯΛόϥ͢ઓུ » αʔϏεʹΑͬͯ͸ελοΫ͝ͱʹϩέʔγϣϯ΍Ϋϥ΢υϓϩόΠμΛબ ΂Δ » ࣗࣾͷαʔϏεͱಉ͡Ϋϥ΢υϓϩόΠμ΍ϩέʔγϣϯʢϦʔδϣϯʣΛ બ୒͢Δ͜ͱͰPrivateLink͕࢖͑ͨΓసૹྔΛ཈͑ΒΕͨΓ͢ΔͷͰτϨʔ υΦϑ͸͋Δ » ݸਓతʹ͸શ໓͸ਏ͍ͷͰɺڧ͍ཧ༝͕ͳ͚Ε͹ద౓ʹόϥ͢ઓུΛਪͯ͠

    ͍Δ

  15. ೝূج൫ͷαʔϏε͕ར༻ෆՄʹͳͬͨΒʁ » EntraIDͳͲɺSSOͷج൫͕μ΢ϯ͢Δͱ࡞ۀͦͷ΋ͷ͕Ͱ͖ͳ͘ͳΓେมͭΒ͍ » େࣄͳαʔϏεʹ͸ඇৗޱΛ༻ҙ͓ͯ͘͠ » AWSͰ͋Ε͹MFAઃఆͯ͠ผΞΧ΢ϯτʹඇৗ༻ϢʔβʔΛ࡞͓ͬͯ͘ͱ͔ » αʔϏεʹΑͬͯ͸SAMLͰͷϩάΠϯͷྫ֎ͱͯ͠IDύεϫʔυೝূΛҰ෦ ϢʔβʔʹڐՄ͢ΔɺΈ͍ͨͳ΋ͷ΋͋Δ

    » ج൫ͷμ΢ϯ͡Όͳͯ͘΋ূ໌ॻͷظݶ੾Ε΍ΦϖϛεʹΑΓೖΕͳ͘ͳΔέʔ ε΋͋Δ

  16. ϝʔϧαʔόΛΦϯϓϨ͔ΒΫϥ΢υ΁Ҡߦͨ͠ ࣌ͷձ࿩ » ʮΦϯϓϨͱΫϥ΢υͷμΠϨΫτίωΫτͷ઀ଓ؂ࢹ͸ΦϯϓϨଆͷαʔ όͰ΍ͬͯ·͢ΑͶʯ » ʮͦ͏Ͱ͢Ͷɺ઀ଓஅΛݕ஌ͨ͠৔߹͸ϝʔϧͰ௨஌͍ͯ͠·͢ʯ » ʮϝʔϧαʔό͕Ϋϥ΢υଆʹҠߦ͢ΔͱμΠϨΫτίωΫτ͕੾ΕͨΒϝʔ ϧ͕ಧ͔ͳ͘ͳΔͷͰ͸ʁʯ

  17. ·ͱΊ » ֎෦αʔϏε͸جຊతʹΞϯίϯτϩʔϥϒϧͰ͕͢ద౓ʹඋ͑ΒΕΔ͜ͱ΋͋Δ » ࣗࣾͷཁ݅ʹԠͯ͡උ͑·͠ΐ͏ʢ΍Γ͗͢͸ې෺ʣ » උ͑ͷώϯτ » ඞཁʹԠͯ͡ผܦ࿏Λ༻ҙ͢Δ »

    ՄೳͰ͋Ε͹μ΢ϯ࣌ͷڍಈΛγϛϡϨʔτ͓ͯ͘͠ » Έͳ͞ΜͲ͏͞Εͯ·͔͢ʁ

  18. Thank you for listening

  19. None