Upgrade to Pro — share decks privately, control downloads, hide ads and more …

Datadog を OTel にするメリットを考察する — Datadog との併用を実アプリ...

Datadog を OTel にするメリットを考察する — Datadog との併用を実アプリで確かめる / Examining the Benefits of Moving Datadog to OTel — Testing OTel Alongside Datadog in a Real App

Japan Datadog User Group Meetup#23@沖縄
https://datadog-jp.connpass.com/event/404680/

shiro seike PRO

November 20, 2026

Transcript

20 slides
  1. 自己紹介 OSEKKAI × TECHNOLOG Y 清家 史郎 (@seike460) SHIRO SEIKE

    技術コミュニティ統括室長 / シニアエバンジェリスト ・AWS Ambassador ・2025-2026 Japan AWS Top Engineers — コミュニティ ・JAWS-UG 福岡 Co-Organizer / JAWS DAYS 2026 実行委員長 2 ©Fusic Co., Ltd.
  2. dd-trace と OpenTelemetry dd-trace OpenTelemetry(OTel) Datadog の公式の計装ライブラリ CNCF の、ベンダー中立な計装の仕組み HTTP

    や DB の処理を自動で span にする API・SDK・送信の規格 OTLP がそろう dd-trace の形式で Datadog Agent に送る Datadog Agent も OTLP を受け取れる 3 ©Fusic Co., Ltd.
  3. 検証環境のアプリ構成 同じタスク ECS Fargate API・batch・consumer DynamoDB → アプリ Agent FireLens

    Node.js trace log Aurora PostgreSQL S3 SQS → Datadog trace・log Secrets Manager 5 ©Fusic Co., Ltd.
  4. OTel の選択は3つに分ける アプリの container API アプリが呼ぶ計測の書き方 OTel API か dd-trace

    SDK と自動計装 span を作る仕組み dd-trace か OTel SDK 送信 送る形式と送り先 dd-trace の形式か OTLP Datadog Agent → sidecar ↓ Datadog 6 ©Fusic Co., Ltd.
  5. 3つの構成を比較 構成 API SDK / 自動計装 今回の送り先 A dd-trace dd-trace

    dd-trace 6.25 test agent / Datadog B 併用 OTel API dd-trace 6.25 test agent / Datadog C OTel OTel API OTel SDK test agent / Datadog 7 ©Fusic Co., Ltd.
  6. 今回試した構成 手元の Mac 実アプリ → A、B、C AWS(今回作成) C の image

    同じ bundle Datadog Agent → Datadog → Datadog Docker → Fargate Agent は sidecar 3つとも同じ操作をして、Datadog で比べた 8 ©Fusic Co., Ltd.
  7. 同じ操作で見えたspanの数 項目 A dd-trace B 併用 C OTel API(cache なし)

    21 22※ 7 API(cache あり) 16 17※ 4 batch(成功・失敗) 1・1 1・1 1・1 postgres.query cacheなしで確認 cacheなしで確認 なし ※ B の +1 は、OTel のために足した middleware の span。ほかの span は A と同じ 9 ©Fusic Co., Ltd.
  8. Datadogで見たBとCのtrace B 併用 22 span C OTel 7 span cache

    なしの API。Datadog の実画面を切り抜き 10 ©Fusic Co., Ltd.
  9. dd-traceはbundleの中も計装する A・B dd-trace C OTel SDK esbuild plugin で bundle

    の中も計装 計装したい依存を bundle の外に出す Hono の middleware span あり Hono の middleware span なし AWS SDK span あり AWS SDK span あり Postgres の SQL span あり Postgres の SQL span なし Hono の middleware ごとの span と postgres.js の span を出す公式の計装がない 11 ©Fusic Co., Ltd.
  10. 足りないspanを補う 公式の OTel 計装 postgres.js 用はない コミュニティの計装 drizzle と合わず、API が

    502 手書き 約40行 Postgres の span が出た 手書きと @hono/otel を足した C の trace(cache なし、9 span) Hono 公式の @hono/otel も足したが、middleware ごとの span は出ない 12 ©Fusic Co., Ltd.
  11. Datadogでlogからtraceへ C の log OTLP で送信 ↓ Trace タブ 同じ

    trace 実画面を切り抜き 13 ©Fusic Co., Ltd.
  12. 費用と運用で増えるもの custom metrics log metric の temporality 2種 2回 delta

    C の OTel の metric のうち custom に数えられた種類。 計装を足すと増えた FireLens と OTLP の 両方から同じ log が届いた cumulative のままだと 起動直後の計測が消えた 100系列で月5ドル(定価) 取り込みは1GBで0.10ドル Datadog の推奨も delta 価格は Datadog の公開定価。実際の請求額は未確認 15 ©Fusic Co., Ltd.
  13. このアプリで試す価値の仮評価 メリット 仮評価 根拠 計測APIの共通化 ★★ Bで手書き1箇所を変更 traceの送り先を変更 ★★ 同じbundleを、URLだけ変えてtest

    agentにも送信 logも同じ経路で送る ★ FireLensとの二重を避ける設定が要る 不足する計装を追加 ★ 公式の計装がなく、Postgresだけ手書きで補った ★★ 条件がそろえば有用 ★ 有用だが手間が大きい 16 ©Fusic Co., Ltd.
  14. 導 入 を 決 め る 前 に 確 認

    す る Point.01 API・SDK・送り先を分けて考える Point.02 欲しい span と属性を実測する Point.03 得られる価値と運用負担を比べる 17 ©Fusic Co., Ltd.
  15. 参考資料 dd-trace の Node.js 計装と esbuild dd-trace で OTel API

    を使う OTel の計装ライブラリ custom metrics の課金 OTLP の metric と delta temporality ECS Fargate 用の Datadog Terraform module 20 ©Fusic Co., Ltd.

More Decks by shiro seike

Other Decks in Programming