Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
スタンバイにおけるSLOの、これまでとこれから
Search
スタンバイ
June 15, 2022
0
730
スタンバイにおけるSLOの、これまでとこれから
スタンバイ
June 15, 2022
Tweet
Share
More Decks by スタンバイ
See All by スタンバイ
スタンバイ会社紹介資料
stanby_inc
0
9.2k
Amazon Aurora のインフラコストを55%削減した話
stanby_inc
0
4.3k
スタンバイQAのテスト自動化導入
stanby_inc
0
490
検索エンジンをVespaへ移行しています
stanby_inc
0
790
どうするLeSS - スクラムフェス三河2023.9.16
stanby_inc
1
1.3k
スタンバイにおける自然言語処理の利用
stanby_inc
0
1k
マイクロサービスアーキテクチャな組織_システムにSLOを導入している話.pdf
stanby_inc
3
1.8k
スタンバイにおけるECS on Fargateから EKS on Fargateへ移行した話
stanby_inc
1
1.3k
Featured
See All Featured
Being A Developer After 40
akosma
87
590k
The Cost Of JavaScript in 2023
addyosmani
45
6.8k
VelocityConf: Rendering Performance Case Studies
addyosmani
325
24k
The Psychology of Web Performance [Beyond Tellerrand 2023]
tammyeverts
44
2.2k
Sharpening the Axe: The Primacy of Toolmaking
bcantrill
38
1.8k
Helping Users Find Their Own Way: Creating Modern Search Experiences
danielanewman
29
2.3k
Exploring the Power of Turbo Streams & Action Cable | RailsConf2023
kevinliebholz
27
4.3k
Why Our Code Smells
bkeepers
PRO
334
57k
I Don’t Have Time: Getting Over the Fear to Launch Your Podcast
jcasabona
28
2k
Thoughts on Productivity
jonyablonski
67
4.3k
We Have a Design System, Now What?
morganepeng
50
7.2k
StorybookのUI Testing Handbookを読んだ
zakiyama
27
5.3k
Transcript
スタンバイにおけるSLOの、 これまでとこれから 2022年6月15日 1
自己紹介 小林良太郎 2021年3月 スタンバイ入社 30まで飲食→COBOLer→Oracle DBA→インフラエンジニア→SRE
好きな技術:パケットの気持ちを 考えること 苦手な技術:正規表現 2
会社概要 株式会社スタンバイは、Zホールディングス株式会社と株式会社ビジョナルによる合弁事業会社です 社名 株式会社スタンバイ 事業内容 求人検索エンジン「スタンバイ」の運営 住所 東京都渋谷区 設立 2019年11月12日
資本金 1億円 株式保有割合 Zホールディングス60%、ビジョナル40% Yahoo! JAPAN LINE ZOZOTOWN PayPay etc BIZREACH HRMOS M&Aサクシード トラボックス etc 3
提供サービス スタンバイは全国の仕事情報からニーズにあった 最適な求人を探すことができる求人検索エンジンです。 職種やキーワードと希望の勤務地を入れれば、すぐに仕事 が探せます。さらに、正社員・派遣・アルバイト・パートな どの働き方や、給与、応募条件などのこだわり条件を絞り 込んで求人を探すことができます。 より多くの仕事情報を、より早く、より便利に ユーザーにお届けできるよう開発に取り組んでおります。 求人検索エンジン
4 https://jp.stanby.com 技術観点での仕組み:スタンバイの検索の仕組み(Stanby Tech Blog)
アジェンダ スタンバイにおける今までのSLO スタンバイにおけるこれからのSLO 5
今までのSLO Observability Conference 2022で発表しました 6 https://event.cloudnativedays.jp/o11y2022/talks/1368
今までのSLO SREチームは各チームに基盤や仕組みを提供 7 https://event.cloudnativedays.jp/o11y2022/talks/1368
今までのSLO -課題- 気合を入れてつくったSLOを半年運用して出た課題 8 https://event.cloudnativedays.jp/o11y2022/talks/1368
今までのSLO -改善- ツールの統合やオーナーシップ重要性を認識 9 https://event.cloudnativedays.jp/o11y2022/talks/1368
あれから3ヶ月 大きな進捗はありません 10
SLO導入準備 Datadogでのログ管理を本番導入 ◦ EKS → Firelens → Firehose →
Datadog のルート ◦ 全てのログをインデックス化してパケ死 ▪ 障害調査用にエラーのログだけをIndex化 ▪ ログからCustomMetricsを作ってSLO監視はそのメトリクスを見るようにした 11 https://docs.datadoghq.com/ja/account_management/billing/log_management/ https://docs.datadoghq.com/ja/logs/logs_to_metrics/
SLO導入準備 DatadogのIncident管理機能を本格導入 12 https://docs.datadoghq.com/ja/monitors/incident_management/incident_details
SLO導入準備 DatadogのIncident管理機能でMTTRやインシデント対応した人を可 視化できることに気づく 13
SLOのこれから 他チームに運用してもらうので、導入しやすく成果が見えやすい形にして提案 ◦ ツールを統合し、可視化しやすいようにする チーム間でSLO運用のフェーズや課題が異なるので柔軟に対応 ◦ これから導入するチームや導入したSLOを改善したいチームなどなど、それぞれの課題をヒ アリングしてステップアップしていく
目指すところ ◦ サステナブルなシステムとエンジニアの幸福 ◦ ビジネスニーズの充足と顧客の幸福 14
None