Upgrade to Pro — share decks privately, control downloads, hide ads and more …

明日から始めるSidekiqオブザーバビリティ向上

Sponsored · Your Podcast. Everywhere. Effortlessly. Share. Educate. Inspire. Entertain. You do you. We'll handle the rest. →
Avatar for imaharu imaharu
November 12, 2023
Technology
5.6k
3

 明日から始めるSidekiqオブザーバビリティ向上

After Kaigi on Rails LT Night で登壇しました

https://smartbank.connpass.com/event/299631

Avatar for imaharu

imaharu

November 12, 2023

Other Decks in Technology

See All in Technology
就職⽀援サービスにおけるキャリアアドバイザーのシフトスケジューリング
Avatar for Recruit recruitengineers
PRO
1
130
新しいVibe Codingと”自走”について
Avatar for watany watany
5
290
やさしいA2A入門
Avatar for みのるん minorun365
PRO
11
1.7k
Disciplined Vibes: Scaling AI-Assisted Engineering
Avatar for Sheharyar Naseer sheharyar
0
130
Agent Skills設計で柔軟性と硬さのバランスが難しい話
Avatar for nassy nassy20
0
110
DevOps Agentで始めるAWS運用 〜フロンティアエージェントが変える運用の現場〜
Avatar for nyankotaro nyankotaro
1
380
Agentic Web
Avatar for dynamis dynamis
1
200
"何を作るか"を任される エンジニアは、どう育つのか
Avatar for ofuji-works yutaokafuji
1
580
Oracle AI Database@AWS：サービス概要のご紹介
Avatar for oracle4engineer oracle4engineer
PRO
4
2.9k
生成 AI × MCP で切り拓く次世代 SRE！自律型運用への挑戦と開発者体験の進化
Avatar for _awache _awache
0
190
AAIFに入ってみた ～内から見えるコミュニティ動向～
Avatar for Satoshi Ito sato4
0
140
Kubernetesにおける学習基盤とLLMOpsの概要
Avatar for ry ry
1
230

Featured

See All Featured
Visualizing Your Data: Incorporating Mongo into Loggly Infrastructure
Avatar for mongodb mongodb
49
10k
Deep Space Network (abreviated)
Avatar for Tony Rice tonyrice
0
170
Discover your Explorer Soul
Avatar for Emna emna__ayadi
2
1.1k
The Mindset for Success: Future Career Progression
Avatar for Greg Gifford greggifford
PRO
0
360
Reality Check: Gamification 10 Years Later
Avatar for Sebastian Deterding codingconduct
0
2.2k
A designer walks into a library…
Avatar for Paul Jervis Heath pauljervisheath
211
24k
JAMstack: Web Apps at Ludicrous Speed - All Things Open 2022
Avatar for David Neal reverentgeek
1
470
The Web Performance Landscape in 2024 [PerfNow 2024]
Avatar for Tammy Everts tammyeverts
12
1.2k
Skip the Path - Find Your Career Trail
Avatar for Mark Kilby mkilby
1
140
Redefining SEO in the New Era of Traffic Generation
Avatar for Szymon Słowik szymonslowik
1
330
Build your cross-platform service in a week with App Engine
Avatar for Jose L jlugia
234
18k
Organizational Design Perspectives: An Ontology of Organizational Design Elements
Avatar for Dr. Kim W Petersen kimpetersen
PRO
1
720

Transcript

  1. GLOBIS DIGITAL PLATFORM 明日から始める Sidekiqオブザーバビリティ向上

  2. GLOBIS DIGITAL PLATFORM 2 自己紹介 越智亮太 @imaharuTech 株式会社グロービス Railsエンジニア3年 SRE

    1.5年

  3. 会社紹介

  4. GLOBIS DIGITAL PLATFORM 4 本日のゴール 明日、Sidekiqオブザーバビリティ向上 Pull Requestを作成し 検証環境で実験できるになる

  5. GLOBIS DIGITAL PLATFORM 5 オブザーバビリティとは システムで何が起きているか把握できる能力

  6. GLOBIS DIGITAL PLATFORM 6 Sidekiqのオブザーバビリティがある状態 1. 遅いJobが特定可能 2. Jobが完了していない原因を特定可能

  7. GLOBIS DIGITAL PLATFORM 7 Sidekiqのオブザーバビリティがある状態 遅いJobが特定可能

  8. GLOBIS DIGITAL PLATFORM 8 Sidekiqのオブザーバビリティがある状態 Jobが完了していない原因を特定可能

  9. GLOBIS DIGITAL PLATFORM 9 Sidekiqのオブザーバビリティがある状態 Jobが完了していない原因を特定可能

  10. GLOBIS DIGITAL PLATFORM 10 Sidekiqのオブザーバビリティ向上施策の紹介 1. エラーログにjid追加 2. enqueuedログ追加 3.

    dequeuedログにjob引数を追加 4. datadogのdurationとelapsedを紐付け 5. job statusを追加

  11. GLOBIS DIGITAL PLATFORM 11 Sidekiqのオブザーバビリティ向上施策の紹介 1. エラーログにjid追加 2. enqueuedログ追加 3.

    dequeuedログにjob引数を追加 4. datadogのdurationとelapsedを紐付け 5. job statusを追加

  12. GLOBIS DIGITAL PLATFORM 12 Sidekiq JSONログの出力形式

  13. GLOBIS DIGITAL PLATFORM 13 成功するJobのログ

  14. GLOBIS DIGITAL PLATFORM 14 失敗するJobのログ

  15. GLOBIS DIGITAL PLATFORM 15 エラーメッセージに jidがない

  16. GLOBIS DIGITAL PLATFORM 16 Jobライフサイクル全てのログを追跡できない つまり、Jobが完了していない原因を特定可能できない 引用: https://github.com/sidekiq/sidekiq/wiki/Job-Lifecycle

  17. GLOBIS DIGITAL PLATFORM 17 実装 $ cat config/initializers/sidekiq.rb

  18. GLOBIS DIGITAL PLATFORM 18 実装前後のログ変化

  19. GLOBIS DIGITAL PLATFORM 19 実装 $ cat config/initializers/sidekiq.rb Sidekiq::Context.add

  20. GLOBIS DIGITAL PLATFORM 20 実装の解説 ctxにjidを詰めれば良さそう Sidekiq::Context.add

  21. GLOBIS DIGITAL PLATFORM 21 実装の解説 Sidekiq::Context.add

  22. GLOBIS DIGITAL PLATFORM 22 実装の解説 Sidekiq::Contextは Jobの状態をハッシュに詰め込んだもの Sidekiq::Context.add

  23. GLOBIS DIGITAL PLATFORM 23 実装の解説 $ cat config/initializers/sidekiq.rb config.error_handlers

  24. GLOBIS DIGITAL PLATFORM 24 実装の解説 config.error_handlers

  25. GLOBIS DIGITAL PLATFORM 25 実装の解説 config.error_handlers default error handler add_jid_

    error_handler default error handler Array#unshiftで配列に先頭追加することで 以降のhandlerでctx.jidが出力される

  26. GLOBIS DIGITAL PLATFORM 26 まとめ Jobが完了していない原因を特定しやすくなった！！！ 引用: https://github.com/sidekiq/sidekiq/wiki/Job-Lifecycle

  27. GLOBIS DIGITAL PLATFORM 27 まとめ 明日、Sidekiqオブザーバビリティ向上 Pull Requestを作成し 検証環境で実験できるようになった！

  28. We are hiring！！！