Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
ログ集約基盤をCloudWatchからOpenSearchに変えてみた
Search
YouYou
August 02, 2022
Technology
0
380
ログ集約基盤をCloudWatchからOpenSearchに変えてみた
詳細ブログ↓
https://cuebic.hatenablog.com/entry/2022/07/11/154446
YouYou
August 02, 2022
Tweet
Share
More Decks by YouYou
See All by YouYou
今インフラ技術をイチから学び直すなら
yuhta28
1
160
AWSに詳しくない人でも始められるコスト最適化ガイド
yuhta28
2
540
Datadog外形監視基盤をEC2から ECSへ移行してみた
yuhta28
0
1.4k
アウトプット頑張ったら企業からLT登壇の依頼がきた話
yuhta28
1
1k
小さなことから始めるAWSコスト最適入門
yuhta28
1
930
Datadogのコストも監視しよう
yuhta28
1
760
Rcloneを使った定期的なストレージ同期
yuhta28
0
500
Pulumiを触ってみよう
yuhta28
1
2k
ログストレージコスパ最強!?OpenObserveを試してみた
yuhta28
0
3.2k
Other Decks in Technology
See All in Technology
これはPerl? それともRuby? クイズ〜〜〜〜〜!!!- Perl or Ruby Quiz
moznion
2
1.9k
UE5の雑多なテク
ryuichikawano
0
440
Amazon ECS & AWS Fargate 今昔物語 / past and present stories of Amazon ECS and AWS Fargate
iselegant
14
2.6k
令和最新版 Perlコーディングガイド
anatofuz
4
3.9k
Grafana エコシステムの活用事例 on ABEMA
tetsuya28
4
320
品質マネジメントで抑えておきたい2つのリスクを見分けて未来に備えよう #yapcjapan
makky_tyuyan
0
120
Slackbot × RAG で実現する社内情報検索の最適化
howdy39
2
340
Binary Hacks Rebooted 私選ハック集
nullpo_head
1
290
Efficient zero-copy networking using io_uring
ennael
PRO
0
400
tenntennはなんでnewmoにnew社したの? - YAPC::Hakodate 2024
tenntenn
PRO
0
300
LeSSはスクラムではない!?LeSSにおけるスクラムマスターの振る舞い方とは / Scrum Master Behavior in LeSS
toma_sm
0
210
怖くないオフライン機能開発 〜基本的な技術で実現する現場向けオフライン機能 / Developing offline functions without fear ~ Offline functions for the field realized with basic technology
kaminashi
1
110
Featured
See All Featured
What the flash - Photography Introduction
edds
67
11k
Keith and Marios Guide to Fast Websites
keithpitt
408
22k
Responsive Adventures: Dirty Tricks From The Dark Corners of Front-End
smashingmag
249
21k
The Cult of Friendly URLs
andyhume
77
6k
Understanding Cognitive Biases in Performance Measurement
bluesmoon
26
1.4k
Designing with Data
zakiwarfel
98
5.1k
Making the Leap to Tech Lead
cromwellryan
131
8.9k
Faster Mobile Websites
deanohume
304
30k
I Don’t Have Time: Getting Over the Fear to Launch Your Podcast
jcasabona
27
1.9k
The Invisible Customer
myddelton
119
13k
Optimizing for Happiness
mojombo
375
69k
Imperfection Machines: The Place of Print at Facebook
scottboms
264
13k
Transcript
ログ集約基盤をCloudWatchから OpenSearchに変えてみた 1
Name:ユータ Occupation:SRE Twitter:@Y0u281 (オーでなくゼロです) ブログ:https://zenn.dev/yuta28 自己紹介 Twitter 2
目次 • 背景 • 実装 • 課題 • 改善 •
よかったこと • まとめ 3
背景 4
背景 5 課題 • ログ収集が遅い • 検索しにくい • グラフがほしい
実装 6 AWS側でCloudWatchのログを OpenSearchに転送してくれる
課題 7 すべてのレコードが文字列型で登 録される!!
改善 8
改善 9 すべてのレコードが文字列型で登 録される!!
改善 10 数値型に変換! Fluentdの設定はブログを 御覧ください
よかったこと 11 専用のIAMユーザーを 発行する必要がなくなった
よかったこと 12 ステータスコード割合
よかったこと 13 解決 • ほぼリアルタイムで検索 • 全文検索で検索性向上 • ダッシュボード作成 •
Google認証で簡単ログイン 課題 • ログ収集が遅い • 検索しにくい • グラフがほしい
まとめ 14
より詳しい内容は弊社ブログに 15 CloudWatch LogsからOpenSearchへログ集 約を移行した - CUEBiC TEC BLOG (hatenablog.com)
ありがとうございました 16