Upgrade to Pro — share decks privately, control downloads, hide ads and more …

Kyashの決済部分におけるDatadog監視事例

Sponsored · Your Podcast. Everywhere. Effortlessly. Share. Educate. Inspire. Entertain. You do you. We'll handle the rest. →
Avatar for Seiya Sato Seiya Sato
September 15, 2020
Technology
420
0

 Kyashの決済部分におけるDatadog監視事例

Inside Fintech Meetup ～ Finatext × Kyash × FOLIO ～ の登壇資料

Avatar for Seiya Sato

Seiya Sato

September 15, 2020

Other Decks in Technology

See All in Technology
AIエージェントの知識表現と推論に なぜグラフが使われるのか - 記号的AIの復権とニューラルAIとの統合
Avatar for Yohei Onishi yohei1126
1
160
AIエージェントがあれば技術書なんてすぐ書けるでしょ→無理でした
Avatar for watany watany
6
1k
コンポーネント名には何を含めるべきなのか？ / what-should-be-included-in-component-names
Avatar for airRnot airrnot1106
0
140
インシデント事例と
パッケージの全量解析に学ぶ
ソフトウェアサプライチェーンの守り方 / supply-chain-attack-defense
Avatar for GMO Flatt Security flatt_security
0
1.2k
設計レビューとAIハーネスで向き合う AIが生み出した新しいボトルネックの対処法 / Design Reviews and AI Harnesses Against New Bottlenecks Created by AI
Avatar for Nstock nstock
6
570
脱Jenkins、インターン生が挑んだCIツールGitHubActions移行
Avatar for MIXI ENGINEERS mixi_engineers
PRO
1
210
CTOキーノート：AI時代の「つなぐ」を再定義 ― 真のIoTとリアルワールドAI【SORACOM Discovery 2026】
Avatar for SORACOM（ソラコム） soracom
PRO
0
290
13年運用タイトルのサーバーサイドが辿り着いた現在地 ― モンスターストライクにおける技術・組織・AI活用から得た知見
Avatar for MIXI ENGINEERS mixi_engineers
PRO
1
240
NYC Summit 2026 における Amazon Bedrock AgentCore のアップデート
Avatar for Renya Kujirada ren8k
0
190
「休む」重要さ
Avatar for Makky12 smt7174
7
1.8k
Webの技術とガジェットで子どもも大人も楽しめるワクワク体験を提供する / Qiita Tech Festa Day 2026
Avatar for you（@youtoy） you
PRO
1
310
QA・ソフトウェアテスト研修【MIXI 26新卒技術研修】
Avatar for MIXI ENGINEERS mixi_engineers
PRO
3
1.5k

Featured

See All Featured
GitHub's CSS Performance
Avatar for Jon Rohan jonrohan
1033
470k
30 Presentation Tips
Avatar for Ian Lurie portentint
PRO
1
360
Exploring the relationship between traditional SERPs and Gen AI search
Avatar for Ray Grieselhuber raygrieselhuber
PRO
2
4.2k
Ten Tips & Tricks for a 🌱 transition
Avatar for Manu Carrasco Molina stuffmc
0
160
Future Trends and Review - Lecture 12 - Web Technologies (1019888BNR)
Avatar for Beat Signer signer
PRO
0
3.6k
Product Roadmaps are Hard
Avatar for C. Todd Lombardo iamctodd
55
12k
What the history of the web can teach us about the future of AI
Avatar for Ines Montani inesmontani
PRO
1
640
Measuring & Analyzing Core Web Vitals
Avatar for Philip Tellis bluesmoon
9
920
The Limits of Empathy - UXLibs8
Avatar for Cassini Nazir cassininazir
1
550
Building Experiences: Design Systems, User Experience, and Full Site Editing
Avatar for Michelle Schulp Hunt marktimemedia
0
560
Breaking role norms: Why Content Design is so much more than writing copy - Taylor Woolridge
Avatar for UX Y'all uxyall
0
350
The Success of Rails: Ensuring Growth for the Next 100 Years
Avatar for Eileen M. Uchitelle eileencodes
47
8.2k

Transcript

  1. Kyashの決済部分における Datadog監視事例 Inside Fintech Meetup 〜 Finatext x Kyash x

    FOLIO 〜 2020/09/15 株式会社 Kyash Paymentチーム 佐藤 聖也

  2. 2 佐藤 聖也（さとう せいや） - 2020年3月入社 - Paymentチーム所属 - Visa決済、QUICPay決済関係のお仕事

    - 決済履歴の漢字対応とかとか。。。 自己紹介

  3. 3 01. 監視の構成/ツール 02. Datadogで利用している機能 03. 独自で監視しているもの 04. これから Agenda

  4. 01. 監視の構成/ツール

  5. 監視の構成/ツール サーバーやDB その他マネージドサー ビス Datadog PagerDuty Slack

  6. 02. Datadogで利用している機能

  7. 7 よく使っている機能 - ダッシュボード - Datadog Logs - APM Trace

    Datadogさん素晴らしい ↑ロゴもかわいい

  8. 8 - CPU使用率、I/Oなど基本的なメトリクス - 決済にかかっている時間 - Critical、Emergency Logの出力量 - 存在しないカード番号や有効期限間違いが発生しているオー

    ソリ要求の量 - etc... ダッシュボードに出しているもの（一部）

  9. 9 - CPU使用率、I/Oなど基本的なメトリクス - 決済にかかっている時間 - Critical、Emergency Logの出力量 - 存在しないカード番号や有効期限間違いが発生しているオー

    ソリ要求の量 ダッシュボードに出しているもの（一部） ←トラフィック、 　サチュレーション ← レイテンシ ← エラー ↑ エラー 4大シグナルは把握できるようになっている

  10. ダッシュボードの活用 - オフィスの大きい液晶にダッシュボードを出す - 現在フルリモートなので使えてない - チーム内で設定したSLI/SLOの確認 - 負荷試験を行う時に専用ダッシュボードを作る

  11. ダッシュボードの余談

  12. ダッシュボードの余談 テザリングでダッシュボードを見てると めっちゃくちゃギガが減る…らしい？

  13. Datadog Logs - 使うのは基本的にリリース後や問題を検知したとき - Live Tailを意味もなく見ている - ログが流れるということは利用しているユーザー様がいる ということの証明

    - 各マイクロサービスがどのようなログを出しているのか見 る - 当然カード番号など重要な情報はマスクされている

  14. Datadog Logs のいいところ - SSHしてEC2にログインしなくてもログを見れる - ログが1箇所に集約される - Slackに貼るときログ詳細のURLを貼ればSlackの会話ログを 汚染しない

  15. Datadog Logs を活用するために。。。 - 当たり前ではあるがノイズをへらすこと - 適切なログレベルにする - そもそもそのログ出力は今必要なのか？

  16. APM Traces - 激重リクエストがあったときに何がどのくらいかかっているの か把握する - TracesをDurationでソートすると重いリクエストがわかる - リクエスト内で何がどれだけ時間を使っているか把握する -

    激重クエリ？別のサービスが遅い？

  17. 17 ダッシュボードからTraceをすぐ確認できる ダッシュボードから把握できる Tracesへ即遷移できるのですぐ見に行ける

  18. APM Traces - 快適な決済体験を実現するのに一番役に立っている - まだ完璧ではなくspanの設置の仕方はまだ模索中 - カジュアルに改善している

  19. 03. 独自で監視しているもの

  20. 独自の監視について - VisaのサーバーとのTCPコネクション - TCPコネクションは張りっぱなし

  21. ある夜。。。 突然決済が失敗し始める 決済サーバーのログを見ても特に変な挙動をした様子もない

  22. ある夜。。。 オンコール中にログなどからみんなネットワーク周りと予想は していたけど証明できるものがなかった しばらく経ち専用線サービスからの障害通知を遅れて受 け取る

  23. 対処 自分たちで把握しなければという課題感 - tcpdumpを使ってTCPコネクションの状態を確認できるス クリプトを設置 - 同様の症状が何度か発生したがスクリプトでFINが来てお り切断されたことを把握できるようになった

  24. 04. これから

  25. まだまだ課題はたくさん - 今現状の監視で満足ということはない - より素早くサービスの状態が把握できるようにしたい - Twitterとか見てるとまだ把握しきれていない問題がありそ う - Twitterも優秀なモニタリングツール！？

    より快適な決済体験実現のため 改善を続けていきます！

  26. We’re Hiring! Kyashではアプリエンジニア、サーバーサイドエンジニア、SREな ど様々な職種の募集を行っております！ 一緒に新しいお金の文化を創っていきませんか？ https://kyash.co/recruit @kyashrecruit_jp

  27. ご清聴ありがとうございました！