DatadogAPMで始める Laravelアプリケーションのパフォーマンスチューニング phperkaigi2022

Transcript

1. 株式会社 DROBE 小黒 陽弘 Datadog APM で始める Laravel アプリケーションの パフォーマンスチューニング
2. 自己紹介 • 小黒 陽弘 （おぐろ あきひろ） • 株式会社DROBEで主に PHP x Laravel で開発しています • パーソナルスタイリングサービスのDROBEを作っています ◦ ご興味ある方はぜひ「DROBE」で検索してみてください
3. はじめに • Laravelで開発しているとこんなコードに遭遇しませんか？
4. はじめに toArray() の結果に独自プロパティ を混ぜるために appends に定義を 追加
5. はじめに 追加したプロパティは取 得時にDBアクセスが走 る可能性がある
6. はじめに • 先ほどの Eloquent の一覧取得のAPI
7. はじめに appends で指定したプロパティ取得時、 eager loading していないため N+1 が発生
8. • Laravelを使った開発ではEloquentがよしなにやってくれすぎて、呼び出し 先のことをかなり意識しないと簡単に N+1 が発生してしまう ◦ リレーションがたくさんあると、コード上で追うのが困難 ◦ データ数の少ないローカル環境だと開発中気づけないことも → Laravelを使った開発において開発中に N+1 を完全に排除することは難し い！！ Laravel と N+1
9. • 開発中に気づけないので、パフォーマンスの悪いAPIをリリースしていたり、 過去にリリースしたAPIがデータ増によってパフォーマンスが悪くなったりと いうことが起き得る → リリースされたAPIのパフォーマンスやボトルネックを確認できるようにしてお いて、問題の発見・修正を瞬時に行えるようにするべき Laravel と N+1 どう実現するべきか ...
10. Laravel と N+1 • DROBEではどうしたか？
11. Laravel と N+1 • 試しにDatadog APMを入れてみました • Datadogをもともと使っていたこともあって、とりあえず入れてみたのです が、非常に良かったので今日はそのお話をしていきます
12. このセッションで話すこと • Datadog APM について • DROBEでの活用事例
13. このセッションのゴール • 同じ課題感を持っている人が、自分のプロダクトに Datadog APM を入れてみたいと思えるようになること
14. Datadog APM について
15. APM とは • Application Performance Monitoring (Management) の略称で、ア プリケーションのパフォーマンスを監視・管理することや、監視を行うツール 自体を指す
16. APM とは • APMを導入することで、本番で運用されているアプリケーションのパフォー マンスが可視化され原因の特定・修正結果の確認が容易になる • 例えば N+1 やスロークエリ・無駄に遅いロジックなどが一目でわかるように なる！！
17. Datadog APM とは • Datadog の一機能として提供されているAPM
18. Datadog APM の特徴 • エンドツーエンドトレーシング ◦ アプリからDBに発行されるクエリまで全て紐づけ可能 ◦ ログや各種メトリクスなども含め全てが自動で紐づく • サンプリング無し ◦ データは全て保存し、検索・分析可能な状態に • コードレベルの可視性 ◦ PHP はまだまだベータ版 … • デプロイメントの追跡 ◦ リリースバージョンごとのパフォーマンスをみたりできる • 自動インスツルメンテーション ◦ 様々な環境、言語、FWに対応しており、簡単に導入できる https://www.datadoghq.com/ja/product/apm より抜粋
19. • ２ステップで完了 ◦ 1. Datadog Agent （datadogにデータを送信するdaemon）を動かす ◦ 2. Laravel を動かしている環境にdatadog-php-tracer （いい感じにデータを 収集する php拡張）をいれる • 動作環境に合わせてセットアップ手順がかなり丁寧に記載してある → 詳しくは https://docs.datadoghq.com/ja/tracing/setup_overview/setup/php を参照 Datadog APM の導入
20. Datadog APM ダッシュボード
21. Datadog APM ダッシュボード 時間ごとの秒間のリクエスト数が見 れる
22. Datadog APM ダッシュボード 時間ごとのエラーの数が見れる
23. Datadog APM ダッシュボード 時間ごとのLatencyが見れる
24. Datadog APM ダッシュボード service（phpかdbアクセスか、など） の割合
25. Datadog APM ダッシュボード Latencyの分布が見れる
26. Datadog APM ダッシュボード リリースバージョンごとのパフォーマ ンスが見れる
27. Datadog APM ダッシュボード エンドポイントごとのパフォーマンスがみれる （latencyなどでソート・検索できる）
28. Datadog APM ダッシュボード 単純な平均だけでなく、パーセンタイル統計（全 体のN%のリクエストはX秒以内みたいなデー タ）も見れる
29. Datadog APM ダッシュボード エンドポイントごとのダッシュボード も用意されている
30. Datadog APM ダッシュボード 各リクエストのパフォーマンスが一 覧でみれる
31. Datadog APM ダッシュボード どのタイミングでどういう処理が呼 ばれているかがみれる
32. Datadog APM ダッシュボード 実行時間や呼ばれた回数などが見 える
33. Datadog APM ダッシュボード ログやメトリクスとの紐付けも可能
34. この章のまとめ • APM を入れるとAPIのパフォーマンスやボトルネックを確認できるようにな る • Datadog APM は多機能で簡単に導入可能 • Datadog APM のダッシュボードでは問題の発見・特定を行うための様々 な情報を確認できる
35. DROBEでの活用事例
36. Datadog APM を使ってチューニングしてみる hogehoge api のパフォーマンス悪 いからよろしく〜 • チューニングの具体的なやり方の紹介
37. Datadog APM を使ってチューニングしてみる
38. Datadog APM を使ってチューニングしてみる
39. Datadog APM を使ってチューニングしてみる 緑はDB, 濃い紫がPHP
40. Datadog APM を使ってチューニングしてみる DBアクセスに問題がありそう ..？
41. Datadog APM を使ってチューニングしてみる スパンが 999 回以上も呼ばれている
42. Datadog APM を使ってチューニングしてみる
43. Datadog APM を使ってチューニングしてみる 同じクエリが大量に呼ばれ、呼び出し間隔も 短そう（N+1っぽい！）
44. Datadog APM を使ってチューニングしてみる
45. Datadog APM を使ってチューニングしてみる やたら時間のかかっているクエリはなさそうなので、 スロークエリは無さそう
46. Datadog APM を使ってチューニングしてみる • 該当APIが遅いのは N+1 によるものである可能性が高いというこ とがわかる → 本件に関しては、eager loading されていないところを見つけ修正 & deploy
47. Datadog APM を使ってチューニングしてみる • 結果の確認 新バージョン 旧バージョン
48. Datadog APM を使ってチューニングしてみる • 結果の確認 P50で2倍くらいはやくなった 新バージョン 旧バージョン
49. Datadog APM を使ってチューニングしてみる • 結果の確認
50. Datadog APM を使ってチューニングしてみる • 結果の確認 明らかに N+1 っぽいものもなく なった
51. DROBEでの改善の流れ • チームで行なっている問題の発見〜修正完了までの流れの紹介
52. DROBEでの改善の流れ 1. チームで APMを眺める会 2. スプリント プランニング 3. コード修正 4. リリース ダッシュボードで時間が かかっている処理を見 つける
53. DROBEでの改善の流れ 1. チームで APMを眺める会 2. スプリント プランニング 3. コード修正 4. リリース 優先度を相談してアサイン
54. DROBEでの改善の流れ 1. チームで APMを眺める会 2. スプリント プランニング 3. コード修正 4. リリース 詳細に確認して修正
55. DROBEでの改善の流れ 1. チームで APMを眺める会 2. スプリント プランニング 3. コード修正 4. リリース deploy
56. DROBEでの改善の流れ 1. チームで APMを眺める会 2. スプリント プランニング 3. コード修正 4. リリース 結果を確認しつつ新しい課 題がないかチェック
57. DROBEでの改善結果 ４ヶ月前、計測を始めた時（全 APIの平均）
58. DROBEでの改善結果 ４ヶ月前、計測を始めた時（全 APIの平均） 現在（全APIの平均） ２倍以上早くなった！！
59. まとめ • Laravel で開発してるとどうしても低パフォーマンスなAPIをリリースしてしま うことは避けられない • ただし、APMを使うことで、低パフォーマンスなAPIの存在の確認や問題の 特定が容易に行える • 問題さえわかれば修正自体も容易（なことが多い） • DatadogAPM、導入簡単で効果大なのでまずは入れてみましょう！
60. ご清聴ありがとうございました
61. We are hiring !! 少しでもご興味ある方 お気軽にご連絡ください！ 採用情報 https://info.drobe.co.jp/jobs エンジニアリング資料 https://info.drobe.co.jp/engineering