Upgrade to Pro — share decks privately, control downloads, hide ads and more …

明日から始めるSidekiqオブザーバビリティ向上

Avatar for imaharu imaharu
November 12, 2023
Technology
3
5.3k

 明日から始めるSidekiqオブザーバビリティ向上

After Kaigi on Rails LT Night で登壇しました

https://smartbank.connpass.com/event/299631

Avatar for imaharu

imaharu

November 12, 2023
Tweet

Other Decks in Technology

See All in Technology
猫でもわかるQ_CLI(CDK開発編)+ちょっとだけKiro
Avatar for Hiroo Katoh kentapapa
0
3.4k
Claude Codeは仕様駆動の夢を見ない
Avatar for Gota gotalab555
23
6.2k
AI関数が早くなったので試してみよう
Avatar for kumakura koki kumakura
0
250
全員が手を動かす組織へ - 生成AIが変えるTVerの開発現場 / everyone-codes-genai-transforms-tver-development
Avatar for tohae tohae
0
110
僕たちが「開発しやすさ」を求め 模索し続けたアーキテクチャ #アーキテクチャ勉強会_findy
Avatar for 弁護士ドットコム bengo4com
0
2.3k
Amazon Bedrock AgentCoreのフロントエンドを探す旅 (Next.js編)
Avatar for たけのこ kmiya84377
1
140
専門分化が進む分業下でもユーザーが本当に欲しかったものを追求するプロダクトマネジメント/Focus on real user needs despite deep specialization and division of labor
Avatar for moriyuya moriyuya
1
1.3k
GMOペパボのデータ基盤とデータ活用の現在地 / Current State of GMO Pepabo's Data Infrastructure and Data Utilization
Avatar for Hiroka Zaitsu zaimy
3
210
Oracle Cloud Infrastructure：2025年7月度サービス・アップデート
Avatar for oracle4engineer oracle4engineer
PRO
1
170
反脆弱性(アンチフラジャイル)とデータ基盤構築
Avatar for CUEBiC Inc. cuebic9bic
3
170
AIのグローバルトレンド 2025 / ai global trend 2025
Avatar for kyonmm kyonmm
PRO
1
140
AIに頼りすぎない新人育成術
Avatar for CUEBiC Inc. cuebic9bic
3
230

Featured

See All Featured
I Don’t Have Time: Getting Over the Fear to Launch Your Podcast
Avatar for Joe Casabona jcasabona
33
2.4k
[RailsConf 2023 Opening Keynote] The Magic of Rails
Avatar for Eileen M. Uchitelle eileencodes
29
9.6k
"I'm Feeling Lucky" - Building Great Search Experiences for Today's Users (#IAC19)
Avatar for Dan Newman danielanewman
229
22k
Adopting Sorbet at Scale
Avatar for Ufuk Kayserilioglu ufuk
77
9.5k
A better future with KSS
Avatar for Kyle Neath kneath
239
17k
It's Worth the Effort
Avatar for 3n 3n
185
28k
Refactoring Trust on Your Teams (GOTO; Chicago 2020)
Avatar for Rebecca Miller-Webster rmw
34
3.1k
Easily Structure & Communicate Ideas using Wireframe
Avatar for Afnizar Nur Ghifari afnizarnur
194
16k
Fight the Zombie Pattern Library - RWD Summit 2016
Avatar for Marcelo Somers marcelosomers
234
17k
Music & Morning Musume
Avatar for Bryan Veloso bryan
46
6.7k
GraphQLとの向き合い方2022年版
Avatar for Yosuke Kurami quramy
49
14k
ReactJS: Keep Simple. Everything can be a component!
Avatar for Pedro Nauck pedronauck
667
120k

Transcript

  1. GLOBIS DIGITAL PLATFORM 明日から始める Sidekiqオブザーバビリティ向上

  2. GLOBIS DIGITAL PLATFORM 2 自己紹介 越智亮太 @imaharuTech 株式会社グロービス Railsエンジニア3年 SRE

    1.5年

  3. 会社紹介

  4. GLOBIS DIGITAL PLATFORM 4 本日のゴール 明日、Sidekiqオブザーバビリティ向上 Pull Requestを作成し 検証環境で実験できるになる

  5. GLOBIS DIGITAL PLATFORM 5 オブザーバビリティとは システムで何が起きているか把握できる能力

  6. GLOBIS DIGITAL PLATFORM 6 Sidekiqのオブザーバビリティがある状態 1. 遅いJobが特定可能 2. Jobが完了していない原因を特定可能

  7. GLOBIS DIGITAL PLATFORM 7 Sidekiqのオブザーバビリティがある状態 遅いJobが特定可能

  8. GLOBIS DIGITAL PLATFORM 8 Sidekiqのオブザーバビリティがある状態 Jobが完了していない原因を特定可能

  9. GLOBIS DIGITAL PLATFORM 9 Sidekiqのオブザーバビリティがある状態 Jobが完了していない原因を特定可能

  10. GLOBIS DIGITAL PLATFORM 10 Sidekiqのオブザーバビリティ向上施策の紹介 1. エラーログにjid追加 2. enqueuedログ追加 3.

    dequeuedログにjob引数を追加 4. datadogのdurationとelapsedを紐付け 5. job statusを追加

  11. GLOBIS DIGITAL PLATFORM 11 Sidekiqのオブザーバビリティ向上施策の紹介 1. エラーログにjid追加 2. enqueuedログ追加 3.

    dequeuedログにjob引数を追加 4. datadogのdurationとelapsedを紐付け 5. job statusを追加

  12. GLOBIS DIGITAL PLATFORM 12 Sidekiq JSONログの出力形式

  13. GLOBIS DIGITAL PLATFORM 13 成功するJobのログ

  14. GLOBIS DIGITAL PLATFORM 14 失敗するJobのログ

  15. GLOBIS DIGITAL PLATFORM 15 エラーメッセージに jidがない

  16. GLOBIS DIGITAL PLATFORM 16 Jobライフサイクル全てのログを追跡できない つまり、Jobが完了していない原因を特定可能できない 引用: https://github.com/sidekiq/sidekiq/wiki/Job-Lifecycle

  17. GLOBIS DIGITAL PLATFORM 17 実装 $ cat config/initializers/sidekiq.rb

  18. GLOBIS DIGITAL PLATFORM 18 実装前後のログ変化

  19. GLOBIS DIGITAL PLATFORM 19 実装 $ cat config/initializers/sidekiq.rb Sidekiq::Context.add

  20. GLOBIS DIGITAL PLATFORM 20 実装の解説 ctxにjidを詰めれば良さそう Sidekiq::Context.add

  21. GLOBIS DIGITAL PLATFORM 21 実装の解説 Sidekiq::Context.add

  22. GLOBIS DIGITAL PLATFORM 22 実装の解説 Sidekiq::Contextは Jobの状態をハッシュに詰め込んだもの Sidekiq::Context.add

  23. GLOBIS DIGITAL PLATFORM 23 実装の解説 $ cat config/initializers/sidekiq.rb config.error_handlers

  24. GLOBIS DIGITAL PLATFORM 24 実装の解説 config.error_handlers

  25. GLOBIS DIGITAL PLATFORM 25 実装の解説 config.error_handlers default error handler add_jid_

    error_handler default error handler Array#unshiftで配列に先頭追加することで 以降のhandlerでctx.jidが出力される

  26. GLOBIS DIGITAL PLATFORM 26 まとめ Jobが完了していない原因を特定しやすくなった！！！ 引用: https://github.com/sidekiq/sidekiq/wiki/Job-Lifecycle

  27. GLOBIS DIGITAL PLATFORM 27 まとめ 明日、Sidekiqオブザーバビリティ向上 Pull Requestを作成し 検証環境で実験できるようになった！

  28. We are hiring！！！