Upgrade to Pro — share decks privately, control downloads, hide ads and more …

明日から始めるSidekiqオブザーバビリティ向上

Avatar for imaharu imaharu
November 12, 2023
Technology
3
5.4k

 明日から始めるSidekiqオブザーバビリティ向上

After Kaigi on Rails LT Night で登壇しました

https://smartbank.connpass.com/event/299631

Avatar for imaharu

imaharu

November 12, 2023
Tweet

Other Decks in Technology

See All in Technology
生成AI時代のデータ基盤設計〜ペースレイヤリングで実現する高速開発と持続性〜 / Levtech Meetup_Session_2
Avatar for Sansan R&D sansan_randd
1
150
ChatGPTとPlantUML/Mermaidによるソフトウェア設計
Avatar for gowhich501 gowhich501
1
130
LLMを搭載したプロダクトの品質保証の模索と学び
Avatar for SmartHR 品質保証部 qa
0
1k
MCPで変わる Amebaデザインシステム「Spindle」の開発
Avatar for Ameba Spindle spindle
PRO
3
3.2k
フルカイテン株式会社 エンジニア向け採用資料
Avatar for FULL KAITEN fullkaiten
0
8.7k
バイブスに「型」を！Kent Beckに学ぶ、AI時代のテスト駆動開発
Avatar for amixedcolor amixedcolor
2
540
20250903_1つのAWSアカウントに複数システムがある環境におけるアクセス制御をABACで実現.pdf
Avatar for yhana yhana
3
550
Practical Agentic AI in Software Engineering
Avatar for U-Zyn Chua uzyn
0
110
機械学習を扱うプラットフォーム開発と運用事例
Avatar for LINEヤフーTech (LY Corporation Tech) lycorptech_jp
PRO
0
230
【初心者向け】ローカルLLMの色々な動かし方まとめ
Avatar for Aratako aratako
7
3.4k
Generative AI Japan 第一回生成AI実践研究会「AI駆動開発の現在地──ブレイクスルーの鍵を握るのはデータ領域」
Avatar for KoheiOgawa shisyu_gaku
0
160
大「個人開発サービス」時代に僕たちはどう生きるか
Avatar for Sotaro Karasawa sotarok
20
9.9k

Featured

See All Featured
ReactJS: Keep Simple. Everything can be a component!
Avatar for Pedro Nauck pedronauck
667
120k
Optimizing for Happiness
Avatar for Tom Preston-Werner mojombo
379
70k
Being A Developer After 40
Avatar for Adrian Kosmaczewski akosma
90
590k
Keith and Marios Guide to Fast Websites
Avatar for Keith Pitt keithpitt
411
22k
Bash Introduction
Avatar for André Augusto Costa Santos 62gerente
615
210k
Designing Dashboards & Data Visualisations in Web Apps
Avatar for Des Traynor destraynor
231
53k
Mobile First: as difficult as doing things right
Avatar for Swwweet swwweet
224
9.9k
Context Engineering - Making Every Token Count
Avatar for Addy Osmani addyosmani
2
41
jQuery: Nuts, Bolts and Bling
Avatar for Doug Neiner dougneiner
64
7.9k
The Success of Rails: Ensuring Growth for the Next 100 Years
Avatar for Eileen M. Uchitelle eileencodes
46
7.6k
A better future with KSS
Avatar for Kyle Neath kneath
239
17k
Visualizing Your Data: Incorporating Mongo into Loggly Infrastructure
Avatar for mongodb mongodb
48
9.7k

Transcript

  1. GLOBIS DIGITAL PLATFORM 明日から始める Sidekiqオブザーバビリティ向上

  2. GLOBIS DIGITAL PLATFORM 2 自己紹介 越智亮太 @imaharuTech 株式会社グロービス Railsエンジニア3年 SRE

    1.5年

  3. 会社紹介

  4. GLOBIS DIGITAL PLATFORM 4 本日のゴール 明日、Sidekiqオブザーバビリティ向上 Pull Requestを作成し 検証環境で実験できるになる

  5. GLOBIS DIGITAL PLATFORM 5 オブザーバビリティとは システムで何が起きているか把握できる能力

  6. GLOBIS DIGITAL PLATFORM 6 Sidekiqのオブザーバビリティがある状態 1. 遅いJobが特定可能 2. Jobが完了していない原因を特定可能

  7. GLOBIS DIGITAL PLATFORM 7 Sidekiqのオブザーバビリティがある状態 遅いJobが特定可能

  8. GLOBIS DIGITAL PLATFORM 8 Sidekiqのオブザーバビリティがある状態 Jobが完了していない原因を特定可能

  9. GLOBIS DIGITAL PLATFORM 9 Sidekiqのオブザーバビリティがある状態 Jobが完了していない原因を特定可能

  10. GLOBIS DIGITAL PLATFORM 10 Sidekiqのオブザーバビリティ向上施策の紹介 1. エラーログにjid追加 2. enqueuedログ追加 3.

    dequeuedログにjob引数を追加 4. datadogのdurationとelapsedを紐付け 5. job statusを追加

  11. GLOBIS DIGITAL PLATFORM 11 Sidekiqのオブザーバビリティ向上施策の紹介 1. エラーログにjid追加 2. enqueuedログ追加 3.

    dequeuedログにjob引数を追加 4. datadogのdurationとelapsedを紐付け 5. job statusを追加

  12. GLOBIS DIGITAL PLATFORM 12 Sidekiq JSONログの出力形式

  13. GLOBIS DIGITAL PLATFORM 13 成功するJobのログ

  14. GLOBIS DIGITAL PLATFORM 14 失敗するJobのログ

  15. GLOBIS DIGITAL PLATFORM 15 エラーメッセージに jidがない

  16. GLOBIS DIGITAL PLATFORM 16 Jobライフサイクル全てのログを追跡できない つまり、Jobが完了していない原因を特定可能できない 引用: https://github.com/sidekiq/sidekiq/wiki/Job-Lifecycle

  17. GLOBIS DIGITAL PLATFORM 17 実装 $ cat config/initializers/sidekiq.rb

  18. GLOBIS DIGITAL PLATFORM 18 実装前後のログ変化

  19. GLOBIS DIGITAL PLATFORM 19 実装 $ cat config/initializers/sidekiq.rb Sidekiq::Context.add

  20. GLOBIS DIGITAL PLATFORM 20 実装の解説 ctxにjidを詰めれば良さそう Sidekiq::Context.add

  21. GLOBIS DIGITAL PLATFORM 21 実装の解説 Sidekiq::Context.add

  22. GLOBIS DIGITAL PLATFORM 22 実装の解説 Sidekiq::Contextは Jobの状態をハッシュに詰め込んだもの Sidekiq::Context.add

  23. GLOBIS DIGITAL PLATFORM 23 実装の解説 $ cat config/initializers/sidekiq.rb config.error_handlers

  24. GLOBIS DIGITAL PLATFORM 24 実装の解説 config.error_handlers

  25. GLOBIS DIGITAL PLATFORM 25 実装の解説 config.error_handlers default error handler add_jid_

    error_handler default error handler Array#unshiftで配列に先頭追加することで 以降のhandlerでctx.jidが出力される

  26. GLOBIS DIGITAL PLATFORM 26 まとめ Jobが完了していない原因を特定しやすくなった！！！ 引用: https://github.com/sidekiq/sidekiq/wiki/Job-Lifecycle

  27. GLOBIS DIGITAL PLATFORM 27 まとめ 明日、Sidekiqオブザーバビリティ向上 Pull Requestを作成し 検証環境で実験できるようになった！

  28. We are hiring！！！