Upgrade to Pro — share decks privately, control downloads, hide ads and more …

Kyashの決済部分におけるDatadog監視事例

Sponsored · Ship Features Fearlessly Turn features on and off without deploys. Used by thousands of Ruby developers. →
Avatar for Seiya Sato Seiya Sato
September 15, 2020
Technology
420
0

 Kyashの決済部分におけるDatadog監視事例

Inside Fintech Meetup ～ Finatext × Kyash × FOLIO ～ の登壇資料

Avatar for Seiya Sato

Seiya Sato

September 15, 2020

Other Decks in Technology

See All in Technology
Bet AI Day 2026丨AIを「使う」から、AIが「働く」へ ― LayerXが進める「組織AI」の社会実装
Avatar for LayerX layerx
PRO
3
2.8k
AI時代に、プロダクトの数だけ積み上がる所有コストをどうエンジニアリングするか / Engineering the Cost of Ownership
Avatar for Kazuki Maeda kzkmaeda
1
1.1k
Adaptive Warehouse を今すぐ導入すべき理由と迷ったときの判断基準
Avatar for あれ __allllllllez__
0
110
Bet AI Day 2026丨AIによって本質に戻るシステムリスク管理
Avatar for LayerX layerx
PRO
0
1.3k
Benchmarking Vector Databases: pgvector vs. LanceDB
Avatar for tsho tsho
0
150
Bet AI Day 2026丨Agentは、「金融」という巨大産業の何を変えられるのか
Avatar for LayerX layerx
PRO
0
1.2k
Guerilla InnerSource in enterprises, during the AI hype
Avatar for Oleg Nenashev onenashev
PRO
0
150
多摩川(.dev)ランニング入門 / Tamagawa.dev#3
Avatar for FUJIWARA Shunichiro fujiwara3
3
400
なぜSRE・セキュリティは評価されないのか？守りの組織を事業成長エンジンに変えた実践
Avatar for サイバーセキュリティクラウド cscengineer
PRO
3
2.3k
Autonomous AI Databaseサービス・アップデート（FY27）/ adb-service-update-jp-fy27
Avatar for oracle4engineer oracle4engineer
PRO
0
130
AIとペアプロを始める。人とのペアプロをやめる。ペアプロの良さを改めて知る。もっと好きになった。 / Rediscovering Pair Programming
Avatar for yuki honyanya
1
290
コスト最適化の「めんどくさい」を AWS FinOps Agent でチョット楽にする
Avatar for kaz classmethod_kaz
0
270

Featured

See All Featured
Tips & Tricks on How to Get Your First Job In Tech
Avatar for Honza Javorek honzajavorek
1
720
Music & Morning Musume
Avatar for Bryan Veloso bryan
47
7.4k
Git: the NoSQL Database
Avatar for Brandon Keepers bkeepers
PRO
432
67k
How to make the Groovebox
Avatar for あそなす asonas
2
2.4k
AI in Enterprises - Java and Open Source to the Rescue
Avatar for ivargrimstad ivargrimstad
0
1.5k
Accessibility Awareness
Avatar for Sarah Abderemane sabderemane
1
200
Rails Girls Zürich Keynote
Avatar for Gregor Martynus gr2m
96
14k
How to Ace a Technical Interview
Avatar for Jacob Kaplan-Moss jacobian
281
24k
The Cult of Friendly URLs
Avatar for Andy Hume andyhume
79
7k
Groundhog Day: Seeking Process in Gaming for Health
Avatar for Sebastian Deterding codingconduct
0
330
Winning Ecommerce Organic Search in an AI Era - #searchnstuff2025
Avatar for Aleyda Solis aleyda
1
2.1k
Done Done
Avatar for chrislema chrislema
186
16k

Transcript

  1. Kyashの決済部分における Datadog監視事例 Inside Fintech Meetup 〜 Finatext x Kyash x

    FOLIO 〜 2020/09/15 株式会社 Kyash Paymentチーム 佐藤 聖也

  2. 2 佐藤 聖也（さとう せいや） - 2020年3月入社 - Paymentチーム所属 - Visa決済、QUICPay決済関係のお仕事

    - 決済履歴の漢字対応とかとか。。。 自己紹介

  3. 3 01. 監視の構成/ツール 02. Datadogで利用している機能 03. 独自で監視しているもの 04. これから Agenda

  4. 01. 監視の構成/ツール

  5. 監視の構成/ツール サーバーやDB その他マネージドサー ビス Datadog PagerDuty Slack

  6. 02. Datadogで利用している機能

  7. 7 よく使っている機能 - ダッシュボード - Datadog Logs - APM Trace

    Datadogさん素晴らしい ↑ロゴもかわいい

  8. 8 - CPU使用率、I/Oなど基本的なメトリクス - 決済にかかっている時間 - Critical、Emergency Logの出力量 - 存在しないカード番号や有効期限間違いが発生しているオー

    ソリ要求の量 - etc... ダッシュボードに出しているもの（一部）

  9. 9 - CPU使用率、I/Oなど基本的なメトリクス - 決済にかかっている時間 - Critical、Emergency Logの出力量 - 存在しないカード番号や有効期限間違いが発生しているオー

    ソリ要求の量 ダッシュボードに出しているもの（一部） ←トラフィック、 　サチュレーション ← レイテンシ ← エラー ↑ エラー 4大シグナルは把握できるようになっている

  10. ダッシュボードの活用 - オフィスの大きい液晶にダッシュボードを出す - 現在フルリモートなので使えてない - チーム内で設定したSLI/SLOの確認 - 負荷試験を行う時に専用ダッシュボードを作る

  11. ダッシュボードの余談

  12. ダッシュボードの余談 テザリングでダッシュボードを見てると めっちゃくちゃギガが減る…らしい？

  13. Datadog Logs - 使うのは基本的にリリース後や問題を検知したとき - Live Tailを意味もなく見ている - ログが流れるということは利用しているユーザー様がいる ということの証明

    - 各マイクロサービスがどのようなログを出しているのか見 る - 当然カード番号など重要な情報はマスクされている

  14. Datadog Logs のいいところ - SSHしてEC2にログインしなくてもログを見れる - ログが1箇所に集約される - Slackに貼るときログ詳細のURLを貼ればSlackの会話ログを 汚染しない

  15. Datadog Logs を活用するために。。。 - 当たり前ではあるがノイズをへらすこと - 適切なログレベルにする - そもそもそのログ出力は今必要なのか？

  16. APM Traces - 激重リクエストがあったときに何がどのくらいかかっているの か把握する - TracesをDurationでソートすると重いリクエストがわかる - リクエスト内で何がどれだけ時間を使っているか把握する -

    激重クエリ？別のサービスが遅い？

  17. 17 ダッシュボードからTraceをすぐ確認できる ダッシュボードから把握できる Tracesへ即遷移できるのですぐ見に行ける

  18. APM Traces - 快適な決済体験を実現するのに一番役に立っている - まだ完璧ではなくspanの設置の仕方はまだ模索中 - カジュアルに改善している

  19. 03. 独自で監視しているもの

  20. 独自の監視について - VisaのサーバーとのTCPコネクション - TCPコネクションは張りっぱなし

  21. ある夜。。。 突然決済が失敗し始める 決済サーバーのログを見ても特に変な挙動をした様子もない

  22. ある夜。。。 オンコール中にログなどからみんなネットワーク周りと予想は していたけど証明できるものがなかった しばらく経ち専用線サービスからの障害通知を遅れて受 け取る

  23. 対処 自分たちで把握しなければという課題感 - tcpdumpを使ってTCPコネクションの状態を確認できるス クリプトを設置 - 同様の症状が何度か発生したがスクリプトでFINが来てお り切断されたことを把握できるようになった

  24. 04. これから

  25. まだまだ課題はたくさん - 今現状の監視で満足ということはない - より素早くサービスの状態が把握できるようにしたい - Twitterとか見てるとまだ把握しきれていない問題がありそ う - Twitterも優秀なモニタリングツール！？

    より快適な決済体験実現のため 改善を続けていきます！

  26. We’re Hiring! Kyashではアプリエンジニア、サーバーサイドエンジニア、SREな ど様々な職種の募集を行っております！ 一緒に新しいお金の文化を創っていきませんか？ https://kyash.co/recruit @kyashrecruit_jp

  27. ご清聴ありがとうございました！