Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
スタンバイにおけるSLOの、これまでとこれから
Search
スタンバイ
June 15, 2022
0
790
スタンバイにおけるSLOの、これまでとこれから
スタンバイ
June 15, 2022
Tweet
Share
More Decks by スタンバイ
See All by スタンバイ
スタンバイ会社紹介資料
stanby_inc
0
18k
Amazon Aurora のインフラコストを55%削減した話
stanby_inc
0
4.4k
スタンバイQAのテスト自動化導入
stanby_inc
0
520
検索エンジンをVespaへ移行しています
stanby_inc
0
910
どうするLeSS - スクラムフェス三河2023.9.16
stanby_inc
1
1.4k
スタンバイにおける自然言語処理の利用
stanby_inc
0
1.1k
マイクロサービスアーキテクチャな組織_システムにSLOを導入している話.pdf
stanby_inc
3
1.9k
スタンバイにおけるECS on Fargateから EKS on Fargateへ移行した話
stanby_inc
1
1.4k
Featured
See All Featured
Practical Tips for Bootstrapping Information Extraction Pipelines
honnibal
PRO
11
930
ピンチをチャンスに:未来をつくるプロダクトロードマップ #pmconf2020
aki_iinuma
114
50k
A Tale of Four Properties
chriscoyier
158
23k
Fantastic passwords and where to find them - at NoRuKo
philnash
51
3k
Building a Modern Day E-commerce SEO Strategy
aleyda
38
7.1k
Evolution of real-time – Irina Nazarova, EuRuKo, 2024
irinanazarova
6
530
Refactoring Trust on Your Teams (GOTO; Chicago 2020)
rmw
33
2.8k
CSS Pre-Processors: Stylus, Less & Sass
bermonpainter
356
29k
Typedesign – Prime Four
hannesfritz
40
2.5k
Designing on Purpose - Digital PM Summit 2013
jponch
117
7.1k
BBQ
matthewcrist
86
9.4k
Save Time (by Creating Custom Rails Generators)
garrettdimon
PRO
29
1k
Transcript
スタンバイにおけるSLOの、 これまでとこれから 2022年6月15日 1
自己紹介 小林良太郎 2021年3月 スタンバイ入社 30まで飲食→COBOLer→Oracle DBA→インフラエンジニア→SRE
好きな技術:パケットの気持ちを 考えること 苦手な技術:正規表現 2
会社概要 株式会社スタンバイは、Zホールディングス株式会社と株式会社ビジョナルによる合弁事業会社です 社名 株式会社スタンバイ 事業内容 求人検索エンジン「スタンバイ」の運営 住所 東京都渋谷区 設立 2019年11月12日
資本金 1億円 株式保有割合 Zホールディングス60%、ビジョナル40% Yahoo! JAPAN LINE ZOZOTOWN PayPay etc BIZREACH HRMOS M&Aサクシード トラボックス etc 3
提供サービス スタンバイは全国の仕事情報からニーズにあった 最適な求人を探すことができる求人検索エンジンです。 職種やキーワードと希望の勤務地を入れれば、すぐに仕事 が探せます。さらに、正社員・派遣・アルバイト・パートな どの働き方や、給与、応募条件などのこだわり条件を絞り 込んで求人を探すことができます。 より多くの仕事情報を、より早く、より便利に ユーザーにお届けできるよう開発に取り組んでおります。 求人検索エンジン
4 https://jp.stanby.com 技術観点での仕組み:スタンバイの検索の仕組み(Stanby Tech Blog)
アジェンダ スタンバイにおける今までのSLO スタンバイにおけるこれからのSLO 5
今までのSLO Observability Conference 2022で発表しました 6 https://event.cloudnativedays.jp/o11y2022/talks/1368
今までのSLO SREチームは各チームに基盤や仕組みを提供 7 https://event.cloudnativedays.jp/o11y2022/talks/1368
今までのSLO -課題- 気合を入れてつくったSLOを半年運用して出た課題 8 https://event.cloudnativedays.jp/o11y2022/talks/1368
今までのSLO -改善- ツールの統合やオーナーシップ重要性を認識 9 https://event.cloudnativedays.jp/o11y2022/talks/1368
あれから3ヶ月 大きな進捗はありません 10
SLO導入準備 Datadogでのログ管理を本番導入 ◦ EKS → Firelens → Firehose →
Datadog のルート ◦ 全てのログをインデックス化してパケ死 ▪ 障害調査用にエラーのログだけをIndex化 ▪ ログからCustomMetricsを作ってSLO監視はそのメトリクスを見るようにした 11 https://docs.datadoghq.com/ja/account_management/billing/log_management/ https://docs.datadoghq.com/ja/logs/logs_to_metrics/
SLO導入準備 DatadogのIncident管理機能を本格導入 12 https://docs.datadoghq.com/ja/monitors/incident_management/incident_details
SLO導入準備 DatadogのIncident管理機能でMTTRやインシデント対応した人を可 視化できることに気づく 13
SLOのこれから 他チームに運用してもらうので、導入しやすく成果が見えやすい形にして提案 ◦ ツールを統合し、可視化しやすいようにする チーム間でSLO運用のフェーズや課題が異なるので柔軟に対応 ◦ これから導入するチームや導入したSLOを改善したいチームなどなど、それぞれの課題をヒ アリングしてステップアップしていく
目指すところ ◦ サステナブルなシステムとエンジニアの幸福 ◦ ビジネスニーズの充足と顧客の幸福 14
None