Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
ストレスフリーなオペレーションを目指して
Search
MIXI ENGINEERS
PRO
January 24, 2019
Technology
0
680
ストレスフリーなオペレーションを目指して
https://www.janog.gr.jp/meeting/janog43/
JANOG43ミーティング
MIXI ENGINEERS
PRO
January 24, 2019
Tweet
Share
More Decks by MIXI ENGINEERS
See All by MIXI ENGINEERS
MIXI の DevRel 活動は採用にどう影響を与えようとしているか? / Effective Developer Relations for hiring at MIXI, Inc.
mixi_engineers
PRO
1
81
【D2-5】MIXI SREの最新事例まるわかり! 〜 各事業のSRE活動にかかわるエンジニアに本音を聞く | #MTDC2024 | MIXI TECH DESIGN CONFERENCE 2024
mixi_engineers
PRO
3
89
【D2-7】共闘ことばRPG コトダマンの自律分散型QA組織 | #MTDC2024 | MIXI TECH DESIGN CONFERENCE 2024
mixi_engineers
PRO
1
36
【D2-S1】MIXIオンプレミス設備のこれまでとこれから~そして印西へ~ | #MTDC2024 | MIXI TECH DESIGN CONFERENCE 2024
mixi_engineers
PRO
1
64
【D2-6】モンスト10周年における真獣神化実装担当者が10年分の形態変化の設計をイチから作り直した話 | #MTDC2024 | MIXI TECH DESIGN CONFERENCE 2024
mixi_engineers
PRO
2
86
【D2-8】WordPressのヘッドレス運用化 〜minimo roomのJamstack構成移行プロジェクト〜 | #MTDC2024 | MIXI TECH DESIGN CONFERENCE 2024
mixi_engineers
PRO
2
44
【D2-S2】Kotlin と Flutter を愛であう会 for Android開発 | #MTDC2024 | MIXI TECH DESIGN CONFERENCE 2024
mixi_engineers
PRO
2
70
なんで私に登壇依頼が?! ~頼られるエンジニアになるためには~ /
mixi_engineers
PRO
2
250
【D1-3】フィギュアスケートにおける自動追尾カメラ開発 - 位置情報+AI画像解析 | #MTDC2024 | MIXI TECH DESIGN CONFERENCE 2024
mixi_engineers
PRO
1
330
Other Decks in Technology
See All in Technology
しくじり先生、PharmaXのLLMアプリケーション開発の失敗を語る
pharma_x_tech
0
140
生成AIの変革の時代に、直近1年で直面した課題とその解決策
ktc_wada
1
790
Babylon.js JAPAN活動紹介 (2024/4)
limes2018
1
130
類似ロジック実装をiOS/Android間で合わせる道標No.1
fumiyasac0921
1
170
自らを知り外と繋がる、日経のエンジニア採用とDevRel活動/devreljp92
nishiuma
2
190
AWSに詳しくない人でも始められるコスト最適化ガイド
yuhta28
2
420
M5と自作基板をくっつけてみた〜M5 Japan Tour 2024 Spring 福冈 (Fukuoka|福岡)〜
keropiyo
1
250
Grafana x PagerDuty Better Together
jacopen
1
340
Babylon.jsと色々なものを組み合わせる:ブラウザのAPIやガジェットや2D描画ライブラリなど / Babylon.js 勉強会 vol.3
you
PRO
0
190
【SORACOM UG 東海】あらゆるモノがつながる社会へ、IoT と SORACOM
soracom
PRO
1
370
Kaggleで学ぶ系列データのための深層学習モデリング
yu4u
7
990
高専で制御を、大学でセンシングを学び、次は脳みそ
satoshirobatofujimoto
0
120
Featured
See All Featured
Optimising Largest Contentful Paint
csswizardry
13
2.4k
Fantastic passwords and where to find them - at NoRuKo
philnash
39
2.5k
Refactoring Trust on Your Teams (GOTO; Chicago 2020)
rmw
26
2.3k
Atom: Resistance is Futile
akmur
260
25k
Typedesign – Prime Four
hannesfritz
36
2.1k
5 minutes of I Can Smell Your CMS
philhawksworth
199
19k
Code Reviewing Like a Champion
maltzj
515
39k
What's new in Ruby 2.0
geeforr
337
31k
Visualizing Your Data: Incorporating Mongo into Loggly Infrastructure
mongodb
34
8.9k
Navigating Team Friction
lara
179
13k
The Language of Interfaces
destraynor
151
23k
Designing for Performance
lara
601
67k
Transcript
ストレスフリーなオペレーション環境を目指して 2019.1.16 山田千紗 株式会社ミクシィ JANOG43
02 本日の流れ 自己紹介 背景 オペレーションフロー まとめ 01 02 03 04
03 自己紹介 山田千紗(やまだ ちさや) 所属:株式会社ミクシィ 開発本部 基盤開発G 出身:山口県下関市 2015年 某ISP子会社へ新卒で入社
→BtoB, L2運用 Ringプロトコルで苦しむ 2018年 株式会社ミクシィへ入社 →BtoC, 自社サービスBB運用 BGPを勉強中 • NW業界4年目です。 • JANOG参加は2回目、登壇は初めて
背景
04 背景 ①管理対象の事情 • ほとんどの機器が同じメーカー • 機器の台数自体はさほど多くない(数十台規模) ②システムの事情 • 構成変更が頻繁に発生する
• スピード感のある対応が必要 ③チーム体制の事情 • リモートワークのメンバーがいる • DCでの物理作業とオペレーションを一人で担当することもある 顔を合わせてのオペレーションが困難
フロー
04 作業準備 実機のconfig差分を作成し、PRを上げる • 全機器のconfigはGitHub上で管理 • commitやcommentはBOTがチームのチャンネルへ通知 • PR内での議論の内容もチーム全員へ共有される •
PRの内容について広い意見が得られ、オペレーションの品質が 向上する 指摘 疑問 議論 修正
04 作業準備 実機のconfig差分を作成し、PRを上げる デメリット:configは手打ち 構文ミスやtypoが生じる PR作成時にconfigのsyntaxを自動でcheckするツールを設置 junoser ( https://github.com/codeout/junoser )
【GitHub】 【Slack】 構文ミス
04 作業中 screenコマンドで画面共有 作業中のコミュニケーションはslack上 • リモートから4eyesが可能 • 同じ画面を見るため、認識の共有がしやすい 【Terminal】 【Slack】
04 作業中 状態確認 • 経路情報やBGP neighborの状態チェックは Slack BOTで実施 • GitHub上で差分確認
Gitベースなオペレーション高度化 https://www.janog.gr.jp/meeting/janog43/program/gitops
04 事後作業 • スクリプトで実機configを取得 • xloginを利用 • 再度差分をチェック • Masterリポジトリへpush
作業完了!
まとめ
04 まとめ 確認が煩雑な箇所はBOTを活用 • 必ずしもshowの結果すべてを見る必要はない • ポイントとなる情報をピックアップし、確認者の負担を軽減 screenコマンドが便利 • 確認/作業担当以外の人も別の業務をしつつ作業を追える
• トラブル発生時にも生のオペレーションログを 追えるため情報共有が迅速 もっとイケてるやり方があるよ! ここはこうしたほうがよくなるんじゃない? など、コメントありましたらぜひお声がけください!
None