Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
Software Catalog – Endpointsを活用したMonitorの改善とか
Search
あおしょん
February 26, 2025
Technology
0
9
Software Catalog – Endpointsを活用したMonitorの改善とか
Japan Datadog User Group Meetup#7 発表資料
あおしょん
February 26, 2025
Tweet
Share
More Decks by あおしょん
See All by あおしょん
東京ガス内製開発チームにおけるTerraform活用の現在地とこれから
sh1y0uh
0
260
Other Decks in Technology
See All in Technology
PHPで印刷所に入稿できる名札データを作る / Generating Print-Ready Name Tag Data with PHP
tomzoh
0
150
なぜ私は自分が使わないサービスを作るのか? / Why would I create a service that I would not use?
aiandrox
0
880
ユーザーストーリーマッピングから始めるアジャイルチームと並走するQA / Starting QA with User Story Mapping
katawara
0
270
Helm , Kustomize に代わる !? 次世代 k8s パッケージマネージャー Glasskube 入門 / glasskube-entry
parupappa2929
0
270
AndroidXR 開発ツールごとの できることできないこと
donabe3
0
140
運用しているアプリケーションのDBのリプレイスをやってみた
miura55
1
840
Developers Summit 2025 浅野卓也(13-B-7 LegalOn Technologies)
legalontechnologies
PRO
1
1.4k
2024.02.19 W&B AIエージェントLT会 / AIエージェントが業務を代行するための計画と実行 / Algomatic 宮脇
smiyawaki0820
15
4.1k
一度 Expo の採用を断念したけど、 再度 Expo の導入を検討している話
ichiki1023
1
240
Culture Deck
optfit
0
490
分解して理解する Aspire
nenonaninu
2
500
OpenID BizDay#17 KYC WG活動報告(法人) / 20250219-BizDay17-KYC-legalidentity
oidfj
0
410
Featured
See All Featured
10 Git Anti Patterns You Should be Aware of
lemiorhan
PRO
656
59k
Understanding Cognitive Biases in Performance Measurement
bluesmoon
27
1.6k
Thoughts on Productivity
jonyablonski
69
4.5k
Easily Structure & Communicate Ideas using Wireframe
afnizarnur
193
16k
個人開発の失敗を避けるイケてる考え方 / tips for indie hackers
panda_program
100
18k
Making Projects Easy
brettharned
116
6k
Fantastic passwords and where to find them - at NoRuKo
philnash
51
3k
RailsConf 2023
tenderlove
29
1k
実際に使うSQLの書き方 徹底解説 / pgcon21j-tutorial
soudai
175
52k
Raft: Consensus for Rubyists
vanstee
137
6.8k
Responsive Adventures: Dirty Tricks From The Dark Corners of Front-End
smashingmag
251
21k
ピンチをチャンスに:未来をつくるプロダクトロードマップ #pmconf2020
aki_iinuma
114
50k
Transcript
Copyright© TOKYO GAS Co., Ltd. All Rights Reserved. 東京ガス株式会社 青木
翔平(あおしょん) Software Catalog ‒ Endpoints を活用したMonitorの改善とか Japan Datadog User Group Meetup#7
自己紹介 名前 青木 翔平(あおしょん) 所属 東京ガス株式会社 リビング戦略部 デジタルプロダクト推進G SREチーム 経歴
SI -> 小売IT -> 東京ガス 好き ジョギング on asics スンスンのお悩み相談室 2
Copyright© TOKYO GAS Co., Ltd. All Rights Reserved. Datadog Live
Tokyo 2024 Reprise 3
Copyright© TOKYO GAS Co., Ltd. All Rights Reserved. (Reprise発表スライド抜粋) myTOKYOGASとは(主なコンポーネント・役割)
東京ガスの内製開発チームにてフロントエンド・東京ガスiネットにて バックエンドをそれぞれ担当し、サービスの機能改善・ モニタリング/オブザーバビリティ強化の推進に取り組んでいます。 お客さま フロントエンド バックエンド 基幹システム BFF myTOKYOGAS 4
Copyright© TOKYO GAS Co., Ltd. All Rights Reserved. (Reprise発表スライド抜粋)次に目指すMonitor全体像 5
Error Rate Monitor 内製開発チーム 基幹システム BFF バックエンドチーム Notification 基幹システム担当 問合わせ 問合わせ 徐々にDatadogでつむいでいく活 動をチーム一丸となってやってい く Error Rate Monitor バックエンド Notification APMの機能であるAPI Catalogを元に バックエンドのMonitorを整理してい く
Copyright© TOKYO GAS Co., Ltd. All Rights Reserved. (Reprise発表スライド抜粋)次に目指すMonitor全体像 6
Error Rate Monitor 内製開発チーム 基幹システム BFF バックエンドチーム Notification 基幹システム担当 問合わせ 問合わせ 徐々にDatadogでつむいでいく活 動をチーム一丸となってやってい く Error Rate Monitor バックエンド Notification APMの機能であるAPI Catalogを元に バックエンドのMonitorを整理してい く こちらの内容を少し 深堀り
Copyright© TOKYO GAS Co., Ltd. All Rights Reserved. なお、名前がAPI Catalogではなくなっている
7 API Catalog >> Service Catalog (API Catalog) >> Software Catalog (Endpoints) New…?
Copyright© TOKYO GAS Co., Ltd. All Rights Reserved. お話しすること 1.
Software Catalog ‒ Endpoints について 2. Monitor改善の現状 3. Monitor改善から派生してInferred Servicesの活用 4. まとめ 8
Copyright© TOKYO GAS Co., Ltd. All Rights Reserved. Software Catalog
‒ Endpoints について 9
Copyright© TOKYO GAS Co., Ltd. All Rights Reserved. Endpointを開くと 10
Datadog APM Agentを導入しているホストのHTTPエンドポイントが一覧表示 POST, GETメソッド、SERVICEなども判別出来る
Copyright© TOKYO GAS Co., Ltd. All Rights Reserved. EndpointごとのSummaryを見れるのが良い 11
Copyright© TOKYO GAS Co., Ltd. All Rights Reserved. Monitorが作成しやすい 12
Copyright© TOKYO GAS Co., Ltd. All Rights Reserved. 何が嬉しかったか 13
エンジニアだけでなくビジネスメンバーがエンドポイントごとの情報を容易に 参照することができる。 今まではビジネスチームからエンジニアチームへ情報提供の依頼をされて Dashboardを作成する流れだった ちょっとDatadogが分かる人がMonitor作成を担っていることが多かったが、 ほんのちょっとDatadogが分かる人でもMonitor作成を担いやすくなった 例えばMonitor作成はSREチームに要件伝えてやってもらう、からの脱却
Copyright© TOKYO GAS Co., Ltd. All Rights Reserved. Monitor改善の現状 14
Copyright© TOKYO GAS Co., Ltd. All Rights Reserved. 今までのMonitor全体像 15
Error Rate Monitor 内製開発チーム 基幹システム BFF バックエンド バックエンドチーム Notification 基幹システム担当 問合わせ 問合わせ Errorの架橋
Copyright© TOKYO GAS Co., Ltd. All Rights Reserved. まずは障害時にサービス影響が大きいエンドポイントのMonitorを作成 16
基幹システム バックエンド 基幹システムA 基幹システムB 基幹システムC 基幹システムA エンドポイント 基幹システムB エンドポイント 基幹システムC エンドポイント Error Rate Monitor Latency Monitor バックエンドは今までサーバーメトリクス(CPU, Memoryなど)、ログ、プロセス関連の Monitorのみだったが、Endpointsを活用してエンドポイントのMonitorをサクッと作成 内製開発チーム バックエンドチーム 基幹システム担当 問合わせ Notification
Copyright© TOKYO GAS Co., Ltd. All Rights Reserved. Monitor改善から派生してInferred Servicesの活用
17
Copyright© TOKYO GAS Co., Ltd. All Rights Reserved. どのエンドポイントがどの基幹システムに紐づくのか見える化したくなる 18
基幹システムA (No APM Agent) 基幹システムA エンドポイントa 基幹システムA エンドポイントb 基幹システムA エンドポイントc 基幹システムB (No APM Agent) 基幹システムB エンドポイントa 基幹システムB エンドポイントb 基幹システムB エンドポイントc わ、わからん… 各基幹システムに対する総リクエスト数 やエラー数も見たい
Copyright© TOKYO GAS Co., Ltd. All Rights Reserved. そんな時のInferred Services
19 参考:Inferred services Datadog Agentで下記を設定すると… Agent導入ホストからの送信先ごとに分類してくれる
Copyright© TOKYO GAS Co., Ltd. All Rights Reserved. Inferred ServicesごとのEndpointsの情報が纏まる
20 各エンドポイントのリクエスト数やMonitorの状態も一画面で 見ることが出来る
Copyright© TOKYO GAS Co., Ltd. All Rights Reserved. まとめ 21
Copyright© TOKYO GAS Co., Ltd. All Rights Reserved. お話ししたことのまとめ 22
Software Catalog の EndpointsのおかげでMonitorが作りやすくなりました! Inferred Services もEndpointsの情報纏めるのにとっても便利です!
Copyright© TOKYO GAS Co., Ltd. All Rights Reserved. We are
hiring!! 23 ・東京ガスキャリア経験者採用 https://tokyo-gas.snar.jp/index.aspx ・東京ガス内製開発チーム Tech Blog https://tech-blog.tokyo-gas.co.jp/
Copyright© TOKYO GAS Co., Ltd. All Rights Reserved. ご清聴ありがとうございました! 24
Copyright© TOKYO GAS Co., Ltd. All Rights Reserved.