Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
ログ集約基盤をCloudWatchからOpenSearchに変えてみた
Search
YouYou
August 02, 2022
Technology
0
360
ログ集約基盤をCloudWatchからOpenSearchに変えてみた
詳細ブログ↓
https://cuebic.hatenablog.com/entry/2022/07/11/154446
YouYou
August 02, 2022
Tweet
Share
More Decks by YouYou
See All by YouYou
AWSに詳しくない人でも始められるコスト最適化ガイド
yuhta28
2
490
Datadog外形監視基盤をEC2から ECSへ移行してみた
yuhta28
0
1.4k
アウトプット頑張ったら企業からLT登壇の依頼がきた話
yuhta28
1
910
小さなことから始めるAWSコスト最適入門
yuhta28
1
790
Datadogのコストも監視しよう
yuhta28
1
690
Rcloneを使った定期的なストレージ同期
yuhta28
0
440
Pulumiを触ってみよう
yuhta28
1
1.8k
ログストレージコスパ最強!?OpenObserveを試してみた
yuhta28
0
2.8k
Pulumiで始めるIaC
yuhta28
1
83
Other Decks in Technology
See All in Technology
クラウド利用者の「責任」をどう果たす?AWSセキュリティ対策のススメ #AWSSummit
hiashisan
0
280
20240725 LLMによるDXのビジョンと、今何からやるべきか @Azure OpenAI Service Dev Day
nrryuya
3
1.2k
推薦システムを本番導入する上で一番優先すべきだったこと~NewsPicks記事推薦機能の改善事例を元に~
morinota
0
130
Scaling Technical Excellence at 104: Evolution in AWS and Developer Empowerment
scotthsieh825
1
160
成長期に歩みを止めないための創業期の開発文化形成
mayah
6
420
地理情報とAPIのトレンド
nagix
0
160
What is DRE? - Road to SRE NEXT@広島
chanyou0311
3
630
エンジニア向け会社紹介資料
caddi_eng
14
230k
AWSサービスメニュー開発をしていてAWSを好きだ!と感じた瞬間
toru_kubota
0
130
楽しくGoを学び合う、LayerXの勉強会文化 / LayerX's study culture of having fun and learning Go together
ar_tama
2
350
初中級者用如何使用backlog -VALE TUDOEDITION-
in0u
0
140
What if...? 처음부터 다시 LLM 어플리케이션을 개발한다면
huffon
0
1k
Featured
See All Featured
Designing Experiences People Love
moore
136
23k
Being A Developer After 40
akosma
72
580k
Art, The Web, and Tiny UX
lynnandtonic
291
20k
Happy Clients
brianwarren
94
6.6k
Save Time (by Creating Custom Rails Generators)
garrettdimon
PRO
13
430
Principles of Awesome APIs and How to Build Them.
keavy
124
16k
Making the Leap to Tech Lead
cromwellryan
127
8.7k
[RailsConf 2023 Opening Keynote] The Magic of Rails
eileencodes
17
8.7k
Into the Great Unknown - MozCon
thekraken
20
1.3k
Building Effective Engineering Teams - LeadDev
addyosmani
47
2.2k
Leading Effective Engineering Teams 2024
addyosmani
3
300
A Tale of Four Properties
chriscoyier
155
22k
Transcript
ログ集約基盤をCloudWatchから OpenSearchに変えてみた 1
Name:ユータ Occupation:SRE Twitter:@Y0u281 (オーでなくゼロです) ブログ:https://zenn.dev/yuta28 自己紹介 Twitter 2
目次 • 背景 • 実装 • 課題 • 改善 •
よかったこと • まとめ 3
背景 4
背景 5 課題 • ログ収集が遅い • 検索しにくい • グラフがほしい
実装 6 AWS側でCloudWatchのログを OpenSearchに転送してくれる
課題 7 すべてのレコードが文字列型で登 録される!!
改善 8
改善 9 すべてのレコードが文字列型で登 録される!!
改善 10 数値型に変換! Fluentdの設定はブログを 御覧ください
よかったこと 11 専用のIAMユーザーを 発行する必要がなくなった
よかったこと 12 ステータスコード割合
よかったこと 13 解決 • ほぼリアルタイムで検索 • 全文検索で検索性向上 • ダッシュボード作成 •
Google認証で簡単ログイン 課題 • ログ収集が遅い • 検索しにくい • グラフがほしい
まとめ 14
より詳しい内容は弊社ブログに 15 CloudWatch LogsからOpenSearchへログ集 約を移行した - CUEBiC TEC BLOG (hatenablog.com)
ありがとうございました 16