Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
障害ってだいたい有給取った日に起こるよね(あるいはドラッカーの真摯さについて考えさせられた失敗の話)
Search
sawarabi
April 20, 2022
Business
1
450
障害ってだいたい有給取った日に起こるよね(あるいはドラッカーの真摯さについて考えさせられた失敗の話)
https://rakus.connpass.com/event/241835/
エンジニアの失敗学 LT会 #失敗学LT
で発表した内容です。
sawarabi
April 20, 2022
Tweet
Share
More Decks by sawarabi
See All by sawarabi
振り返った結果、自分のキーワードは安心感だったという話
sawarabi
0
43
気づいたらおっさんになっていたので、コンフリクトマネジメントについて考えてみた
sawarabi
0
23
転職を考えたときに考えたこと (そして転職に至るまで)
sawarabi
3
820
読書会を個人で開催してみた話
sawarabi
0
1.2k
読書会(ABD) エンジニアリングマネージャーのしごと
sawarabi
0
150
Low-Tech Social Network
sawarabi
0
640
スクラムマスター研修受けてみて、 実際どうなったか
sawarabi
0
1.6k
他の人って 普段何してるんだろ?
sawarabi
0
1.3k
r_serverlesslt:某小説投稿サイトでサーバレスにデータ分析して底辺を脱出した話
sawarabi
1
450
Other Decks in Business
See All in Business
PHPerKaigi2024|はじめてのメンバー育成。マネージャーとメンバー視点で振り返る1年間
weddingpark
1
310
about
socialmatch
3
2.8k
株式会社The Chain Museum_会社紹介資料
tcm_hr_01
0
490
「エンジニアリングマネージャーのしごと」勉強してみた
toranoana
2
190
アシスト 会社紹介資料
ashisuto_career
0
54k
アジアクエスト会社紹介資料 / We invite you!
asiaquest
7
69k
LaiBlitz/corporateinformation
laiblitz
0
12k
株式会社リブセンス 会社説明資料(報道関係者様向け)
livesense
PRO
0
320
siracusa 紹介資料
takeshikaneko
0
230
dely株式会社 会社紹介資料/dely
delyinc
12
240k
エンジニア応募者様向け_会社説明資料_202401
brainpadpr
0
950
株式会社WAKUWAKU 会社説明資料2024/Company Description
wakuwaku
0
160
Featured
See All Featured
Infographics Made Easy
chrislema
237
17k
The Pragmatic Product Professional
lauravandoore
24
5.7k
Stop Working from a Prison Cell
hatefulcrawdad
265
19k
[Rails World 2023 - Day 1 Closing Keynote] - The Magic of Rails
eileencodes
1
1.2k
Exploring the Power of Turbo Streams & Action Cable | RailsConf2023
kevinliebholz
0
3.2k
Bootstrapping a Software Product
garrettdimon
PRO
302
110k
Why Our Code Smells
bkeepers
PRO
330
56k
A Tale of Four Properties
chriscoyier
150
22k
Designing on Purpose - Digital PM Summit 2013
jponch
109
6.4k
Building Effective Engineering Teams - LeadDev
addyosmani
25
1.6k
Principles of Awesome APIs and How to Build Them.
keavy
119
16k
Making the Leap to Tech Lead
cromwellryan
122
8.4k
Transcript
障害ってだいたい有給取った日に起こるよね (あるいはドラッカーの真摯さについて 考えさせられた失敗の話) エンジニアの失敗学 LT #失敗学LT 2022/04/20
直近やった失敗 暖かくなったから長袖しまった! 寒い!!! けどハワイ気分でお送りします!
名前:さわらび Twitter:@TSawarabi(質問などお気軽に!) 職業:バックエンドエンジニア 会社:株式会社 Viibar 最近読んだ本:「ハコヅメ」仕事論 最近気になってる映画:必殺!恐竜神父 チャンス!メイドの逆襲 最近の出来事:ほぼ月刊サメ映画、欲しさに 「エイリアンVSジョーズ」のDVDを購入
自己紹介
ほぼ月刊サメ映画、とサメ映画
自己紹介(ストレングスファインダー) ギャラップ認定ストレングスコーチ Top10の内訳 • 戦略的思考力:5個 • 影響力:3個 • 人間関係構築力:2個 実行力どこいった・・・(´・ω・`)
(実行力:実行したい、完遂したい、という資質群) エニアグラムは Type 8w7(独立した人)
山ほどある失敗の話 • 印刷した地図を見ながら面接会場に向かっていたら駅に戻っていた話 • 本番DBのデータメンテ時にwhere句抜きでdelete文を実行した話 • PCのネジが何故か一本余った話 • スケープゴート的なアレで減給された話 •
花粉症で鼻かみまくってたら客先に連れていってもらえなかった話 • オフショア先にマイクロマネジメントしてしまった話 • 障害対応時の報告をミスってお客様にめっちゃ怒られた話 • 失敗ではないけど、神になった話 • 開くとサーバが落ちる地雷みたいなページを踏んでサーバを止めた話 • 思い出せないだけで、多分まだある
山ほどある失敗の話 • 印刷した地図を見ながら面接会場に向かっていたら駅に戻っていた話 • 本番DBのデータメンテ時にwhere句抜きでdelete文を実行した話 • PCのネジが何故か一本余った話 • スケープゴート的なアレで減給された話 •
花粉症で鼻かみまくってたら客先に連れていってもらえなかった話 • オフショア先にマイクロマネジメントしてしまった話 • 障害対応時の報告をミスってお客様にめっちゃ怒られた話 • 失敗ではないけど、神になった話 • 開くとサーバが落ちる地雷みたいなページを踏んでサーバを止めた話 • 思い出せないだけで、多分まだある
当時、私は青かった…(windowsっぽく) 当時の背景 • 社員数20-30人くらいの小さなSIer ◦ 一次請け • 新卒2年目(だったと思うけど、1年目かも) ◦ 4社くらいの保守と追加開発案件
◦ 扱っていたのは基幹システム • 体制としては、上司と自分の二人体制のモノがほとんど • システムもオンプレで、一つのサーバにアプリとDB両方載せてる感じ
障害ってだいたい有給… 1. その日、自分は珍しく有給を取っていた 2. 朝というか昼?、電話を取ったら会社からだった (映画館いってた気がする) 3. 「~さん(お客様)から、システム止まってるって!」 4. 一緒に担当している上司は別の客先で不在とのこと
5. 出社!!
とりあえず障害対応 1. とりあえず状況確認したら、サーバのHDD死んでた 2. 社内で余っていた普通のデスクトップPCを確保 3. そいつにアプリとDBをセットアップ 4. DBは取り急ぎ1日前のバックアップから復旧 5.
タクシーでデータセンターへ。動いていないサーバと繋ぎ替え 6. 動作確認して、復旧連絡 7. 暫定対応完了
後日調査 • 原因は「RAIDコントローラーの故障」 • データのサルベージは不可 ◦ 単純に、お客様側で既に入れなおしているので不要だった、 というのもある • 誰が悪いとかではなく、運がなかったねー、みたいな会話
お客様との月次定例 • めっちゃ怒られた • いつも一緒に来る上司は別件で不在 • 原因はRAIDコントロ―ラーの故障でした、の一言で流してしまった (正直、あんまり触れたくないっていう気持ちがあったかなーと) • お客様:それだけ?
• お客様:契約切る? • お客様:データ入れなおした分の工賃、請求するけどいい? • 最終的に、別日に上司といったらあっさり解決
当時は理不尽だと思ったけど… 当時自分が思ったこと • 有給潰してまでスピード対応したのに… • そもそも自分、悪くないし お客様の不安 • これって再発するの?大丈夫? やるべきだったこと
• ちゃんと説明をして、不安を取り除く
失敗から学んだこと • 相手(お客様)の目線で考える ◦ 基本、お客様は不安 ◦ そこをちゃんと取り除いてあげるのが大事 (こまめに報告入れるとか、影響範囲早めにとか 再発するのかとか、対応どうするのかとか) ◦
誰が悪いとか、どうでもいい 当たり前のことだし、よく言ってることだけど、意外と難しい
None