Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
20150609LT_hidehigo.pdf
Search
hidehigo
June 10, 2015
0
2.1k
20150609LT_hidehigo.pdf
2015 CTO night&day でLT(5分)で発表した資料です。
hidehigo
June 10, 2015
Tweet
Share
More Decks by hidehigo
See All by hidehigo
偶然の科学
hidehigo
0
150
オートモビリティ~自動車と移動の社会学~
hidehigo
0
150
Blockchain概説
hidehigo
0
320
ブロックチェーン概説@X−tech
hidehigo
1
1.2k
社内勉強会_プロジェクトマネジメントの2つのパラダイム〜予測型と経験型〜/20150710
hidehigo
0
8.4k
スクラムの思想@社内勉強会
hidehigo
0
140
fantasticsの裏側.pdf
hidehigo
1
880
facebook オフラインアクセス許可の廃止
hidehigo
0
270
Featured
See All Featured
The Illustrated Children's Guide to Kubernetes
chrisshort
48
48k
Building Adaptive Systems
keathley
38
2.2k
A better future with KSS
kneath
238
17k
Learning to Love Humans: Emotional Interface Design
aarron
272
40k
Speed Design
sergeychernyshev
24
560
For a Future-Friendly Web
brad_frost
174
9.4k
The Myth of the Modular Monolith - Day 2 Keynote - Rails World 2024
eileencodes
13
1.9k
Teambox: Starting and Learning
jrom
132
8.7k
Thoughts on Productivity
jonyablonski
67
4.3k
CSS Pre-Processors: Stylus, Less & Sass
bermonpainter
355
29k
What’s in a name? Adding method to the madness
productmarketing
PRO
22
3.1k
Imperfection Machines: The Place of Print at Facebook
scottboms
264
13k
Transcript
障害あるある とその考察 hidehigo@GaiaX
• 肥後 彰秀 @hidehigo • 株式会社ガイアックス • 技術開発部長 自己紹介 • 2000年インターンを経てガイアックス入社
• 2001年京都大学工学部卒 • 日本初の本格アバターコミュニケーションサイト 「Cafesta」立ち上げ、「ゼクシィnet」構築などのプ ロジェクトマネージャー経験。 • 現在は技術担当部長として技術基盤部門約25名 のマネジメントと全エンジニアの環境づくりを行う
~人と人をつなげる~ ・オンラインコミュニケーションの分野 ・ソーシャルメディアによって変わる 社会を描きたい
中規模(数億程度)の B2B事業が 10数個
社内SNS マーケ ティング 支援 学校 向け Q&A 新規事業群 技術基盤 devops
devops devops devops インフラ IS 基盤 技術推進 …
社内SNS マーケ ティング 支援 学校 向け Q&A 新規事業群 技術基盤 devops
devops devops devops インフラ IS 基盤 技術推進 … 2015年~ 事業組織 2007年〜 機能組織 それ以前 古代文明 組織論:ぜひお話しましょう。
こんなシチュエーション ありませんか? 〜障害あるある〜
障害発生! あるある第1章
でも、 いま手が離せない @移動中 @会議中
泣き叫ぶメンバー 「CTOがいないと 対応できませ ん!!!」
そう、CTOは忙しい
~問題①~ システムにSPoFはないが、 組織が(CTOが)SPoFになっ ていませんか? トラックナンバー1
~解決策①~ CTOのノウハウを 顕在知化し後進の育成 CTO「OOのインシデ ント検索して対応しと いて」
障害発生! あるある第2章 CTOの掛け声 「全員集合!」
あるある第2章 「よしやるぞ」、 とみんな腕まくり とはいかず、、
PC片手に 電話しまくる
~問題②~ あれ?"電話をかける"という 単純作業を手動でやっていま せんか?
~解決策②~ 単純作業は自動化 CTO「まだ電話なんて 単純作業に時間かけ てんの?」
「を。また この事象か」 あるある第3章 「よしよし」
もはや愛着さえ 感じてくる 「ちょーっと 待ってろよー」
「あれ?前回 発生したの いつだっけ?」 あるある第3章
「あれ?前回どう 対応したっけ?」
skypeログ検索…
~問題③~ 貴重な資産が離散して いませんか?
~解決策③~ ログは蓄積し学びに インシデント別 「生」対応履歴 CTO「OOのインシデ ント検索して対応しと いて」(再)
~問題④~ フローとストックが 混在していませんか?
~解決策④~ 通知・連絡はフロー 会話はストック 連絡はどんな手段でもよ い。一方向でも。 状況の共有以降はストッ クする
そんな貴方に システム障害対応の救世主! (リアクティオ)
プロジェクトの関係者に一斉自動コール (リアクティオ)
電話連絡から対応、インシデント管理まで一元管理 (リアクティオ)
None
~解決策②~ 単純作業は自動化