Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
事業を横断したSRE組織の課題解決を加速する取り組み
Search
homirun
April 14, 2023
Technology
0
1.2k
事業を横断したSRE組織の課題解決を加速する取り組み
Pepabo Tech Conference #20 春のSREまつり(
https://pepabo.connpass.com/event/276927/
)
homirun
April 14, 2023
Tweet
Share
More Decks by homirun
See All by homirun
tusで受けて、SFTPで流す: ファイル転送を支える構成と実装
homirun
0
200
プライベートクラウドで動くKubernetesクラスタの運用とこれから
homirun
0
180
カラーミーショップの改善におけるSRE活動について
homirun
0
1.5k
バックエンド志望だった新卒がSREになるまで
homirun
0
2.3k
謎の拡張子.ipynb_てうLT1
homirun
0
210
Other Decks in Technology
See All in Technology
【5分でわかる】セーフィー エンジニア向け会社紹介
safie_recruit
0
30k
シークレット管理だけじゃない!HashiCorp Vault でデータ暗号化をしよう / Beyond Secret Management! Let's Encrypt Data with HashiCorp Vault
nnstt1
3
220
研究開発と製品開発、両利きのロボティクス
youtalk
1
480
Function Body Macros で、SwiftUI の View に Accessibility Identifier を自動付与する/Function Body Macros: Autogenerate accessibility identifiers for SwiftUI Views
miichan
2
170
Skrub: machine-learning with dataframes
gaelvaroquaux
0
120
カミナシ社の『ID管理基盤』製品内製 - その意思決定背景と2年間の進化 #AWSUnicornDay / Kaminashi ID - The Big Whys
kaminashi
3
820
Webブラウザ向け動画配信プレイヤーの 大規模リプレイスから得た知見と学び
yud0uhu
0
210
フルカイテン株式会社 エンジニア向け採用資料
fullkaiten
0
8.7k
フィンテック養成勉強会#56
finengine
0
130
自作JSエンジンに推しプロポーザルを実装したい!
sajikix
1
160
AWS環境のリソース調査を Claude Code で効率化 / aws investigate with cc devio2025
masahirokawahara
2
1.4k
AWSで推進するデータマネジメント
kawanago
0
1.2k
Featured
See All Featured
Put a Button on it: Removing Barriers to Going Fast.
kastner
60
4k
Exploring the Power of Turbo Streams & Action Cable | RailsConf2023
kevinliebholz
34
6k
The Invisible Side of Design
smashingmag
301
51k
Fireside Chat
paigeccino
39
3.6k
Bootstrapping a Software Product
garrettdimon
PRO
307
110k
Principles of Awesome APIs and How to Build Them.
keavy
126
17k
The Language of Interfaces
destraynor
161
25k
Six Lessons from altMBA
skipperchong
28
4k
実際に使うSQLの書き方 徹底解説 / pgcon21j-tutorial
soudai
PRO
187
54k
[RailsConf 2023 Opening Keynote] The Magic of Rails
eileencodes
30
9.6k
Let's Do A Bunch of Simple Stuff to Make Websites Faster
chriscoyier
507
140k
Become a Pro
speakerdeck
PRO
29
5.5k
Transcript
1 事業を横断したSRE組織の 課題解決を加速する取り組み ほみるん a.k.a 新宮 隆太 / GMO PEPABO
inc. 2023.04.14 Pepabo Tech Conference #20 春のSREまつり
技術部 プラットフォームグループ 2021年 新卒入社 2 自己紹介 新宮 隆太 Shingu Ryuta •
あだ名: ほみるん • 新卒3年目 • 自宅にKubernetesクラスタを飼ってます • Twitter : @h0mirun_deux
3 アジェンダ 1. 事業を横断したSRE組織について 2. 取り組みの紹介 3. まとめ
4 1. 事業を横断したSRE組織について
5 基本的にサービスは事業部で開発している GMOペパボのエンジニア組織 1. 事業を横断したSRE組織について 採用目的2021 技術部編 https://tech.pepabo.com/2021/06/25/hiring-tech-division-2021/
6 横断組織である技術部 GMOペパボのエンジニア組織 1. 事業を横断したSRE組織について Pepabo Tech Talk -入社1年以内のメンバーが語る、ペパボの SREチームの取り組み
- ペパボのSREについて https://tech.pepabo.com/pdf/pepabo-sre-202104.pdf
7 技術部 プラットフォームグループ 普段担当するサービスごとでチームが別れている 1. 事業を横断したSRE組織について プラットフォームグループ minneチーム SUZURIチーム ECチーム
8 技術部 プラットフォームグループ サービスから独立したSREチーム • 各サービスのSLI/SLOの策定・運用 • ソフトウェアエンジニアリングを用いたサービス運用効率化 • メトリクスを元にしたパフォーマンスチューニング
• インフラ周り • オンコール対応 1. 事業を横断したSRE組織について より具体的なSRE活動はPHP Conference 2022の動画を御覧ください!
9 2. 取り組みの紹介
10 勉強会 定期的な読書会・勉強会の実施 2. 取り組みの紹介
定期的な読書会・勉強会の実施 11 勉強会 2. 取り組みの紹介
定期的な読書会・勉強会の実施 12 勉強会 2. 取り組みの紹介
定期的な読書会・勉強会の実施 13 勉強会 2. 取り組みの紹介 など... 弊社テックブログに過去の記録があるのでぜひ見てください!
14 SoS会(スクラム・オブ・スクラム) 各事業部担当チーム間の情報共有の場 • 各チーム近況報告 • オンコール対応の共有 • 困りごとの相談 2.
取り組みの紹介
15 全員オンコール 夜間・休日のオンコールは担当チームの枠を超えて全サービスを見る体制 2. 取り組みの紹介 プラットフォームグループ minneチーム SUZURIチーム ECチーム minne事業部の
サービス SUZURI事業部の サービス EC事業部の サービス 平日昼
16 全員オンコール 夜間・休日のオンコールは担当チームの枠を超えて全サービスを見る体制 2. 取り組みの紹介 プラットフォームグループ minneチーム SUZURIチーム ECチーム minne事業部の
サービス SUZURI事業部の サービス EC事業部の サービス 夜間・休日
17 全員オンコール 夜間・休日のオンコールは担当チームの枠を超えて全サービスを見る体制 • オンコール負荷の軽減 • オンコール待機時間が平均化されるように • 不要なアラートの精査・自動化の優先度が上昇 •
サービス特有の事情はドキュメント化 詳しくは、弊社テックブログを見てください! 2. 取り組みの紹介
18 オンコールトレーニング 過去のアラートを使って、どのように解決していくとよいかを考えるトレーニング • チームにジョインしたばかりのメンバーがオンコールに入りやすくなる • 普段担当していないサービスへの理解が進む 2. 取り組みの紹介
19 オンコールトレーニング - レギュレーション 出題者と回答者に分かれて実施する 1. 出題者は発生した事象例を回答者に説明 2. 取り組みの紹介 この監視が落ちたら
まず何をしますか? 出題者 回答者
20 オンコールトレーニング - レギュレーション 出題者と回答者に分かれて実施する 1. 出題者は発生した事象例を回答者に説明 2. 回答者は自分の考えを説明して原因と対策を回答 2.
取り組みの紹介 まずユーザー影響を確認していきます! 具体的には... 出題者 回答者
21 オンコールトレーニング - レギュレーション 出題者と回答者に分かれて実施する 1. 出題者は発生した事象例を回答者に説明 2. 回答者は自分の考えを説明して原因と対策を回答 3.
出題者が回答者の回答に対してフィードバック 2. 取り組みの紹介 よさそうです! 更に良くするなら.... 出題者 回答者
22 3. まとめ
23 今回お話したこと • サービスを横断したSRE組織が各サービスのエンジニアと協力して、サービスの 信頼性を向上させている。 • サービス横断組織の強みを活かすために、様々な取り組みを行っている。 3. まとめ
ご静聴ありがとうございました! 24