Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
ログ集約基盤をCloudWatchからOpenSearchに変えてみた
Search
YouYou
August 02, 2022
Technology
490
0
Share
ログ集約基盤をCloudWatchからOpenSearchに変えてみた
詳細ブログ↓
https://cuebic.hatenablog.com/entry/2022/07/11/154446
YouYou
August 02, 2022
More Decks by YouYou
See All by YouYou
AWSマネコンに複数のアカウントで入れるようになりました
yuhta28
2
280
今インフラ技術をイチから学び直すなら
yuhta28
1
280
AWSに詳しくない人でも始められるコスト最適化ガイド
yuhta28
3
660
Datadog外形監視基盤をEC2から ECSへ移行してみた
yuhta28
0
1.8k
アウトプット頑張ったら企業からLT登壇の依頼がきた話
yuhta28
1
1.8k
小さなことから始めるAWSコスト最適入門
yuhta28
1
1.4k
Datadogのコストも監視しよう
yuhta28
1
1.1k
Rcloneを使った定期的なストレージ同期
yuhta28
0
810
Pulumiを触ってみよう
yuhta28
1
2.7k
Other Decks in Technology
See All in Technology
みんなで作るAWS Tips 100連発 (FinOps編)
schwrzktz
1
300
データを"持てない"環境でのアノテーション基盤設計
sansantech
PRO
1
110
Master Dataグループ紹介資料
sansan33
PRO
1
4.6k
Introduction to Bill One Development Engineer
sansan33
PRO
0
410
最近の技術系の話題で気になったもの色々(IoT系以外も) / IoTLT 花見予定会(たぶんBBQ) @都立潮風公園バーベキュー広場
you
PRO
1
240
クラウドネイティブな開発 ~ 認知負荷に立ち向かうためのコンテナ活用
literalice
0
120
[OAWTT26][THR1028] Oracle AI Database 26ai へのアップグレード:ベストプラクティスと最新情報
oracle4engineer
PRO
1
100
AWS DevOps Agentはチームメイトになれるのか?/ Can AWS DevOps Agent become a teammate
kinunori
6
740
「SaaSの次の時代」に重要性を増すステークホルダーマネジメントの要諦 ~解像度を圧倒的に高めPdMの価値を最大化させる方法~
kakehashi
PRO
1
180
AgentCore×VPCでの設計パターンn選と勘所
har1101
3
280
Data Hubグループ 紹介資料
sansan33
PRO
0
2.9k
明日からドヤれる!超マニアックなAWSセキュリティTips10連発 / 10 Ultra-Niche AWS Security Tips
yuj1osm
0
580
Featured
See All Featured
実際に使うSQLの書き方 徹底解説 / pgcon21j-tutorial
soudai
PRO
199
73k
Future Trends and Review - Lecture 12 - Web Technologies (1019888BNR)
signer
PRO
0
3.5k
Skip the Path - Find Your Career Trail
mkilby
1
110
Leading Effective Engineering Teams in the AI Era
addyosmani
9
1.9k
Facilitating Awesome Meetings
lara
57
6.8k
Designing Experiences People Love
moore
143
24k
Site-Speed That Sticks
csswizardry
13
1.2k
Game over? The fight for quality and originality in the time of robots
wayneb77
1
160
Designing for Timeless Needs
cassininazir
0
190
No one is an island. Learnings from fostering a developers community.
thoeni
21
3.7k
Easily Structure & Communicate Ideas using Wireframe
afnizarnur
194
17k
How STYLIGHT went responsive
nonsquared
100
6.1k
Transcript
ログ集約基盤をCloudWatchから OpenSearchに変えてみた 1
Name:ユータ Occupation:SRE Twitter:@Y0u281 (オーでなくゼロです) ブログ:https://zenn.dev/yuta28 自己紹介 Twitter 2
目次 • 背景 • 実装 • 課題 • 改善 •
よかったこと • まとめ 3
背景 4
背景 5 課題 • ログ収集が遅い • 検索しにくい • グラフがほしい
実装 6 AWS側でCloudWatchのログを OpenSearchに転送してくれる
課題 7 すべてのレコードが文字列型で登 録される!!
改善 8
改善 9 すべてのレコードが文字列型で登 録される!!
改善 10 数値型に変換! Fluentdの設定はブログを 御覧ください
よかったこと 11 専用のIAMユーザーを 発行する必要がなくなった
よかったこと 12 ステータスコード割合
よかったこと 13 解決 • ほぼリアルタイムで検索 • 全文検索で検索性向上 • ダッシュボード作成 •
Google認証で簡単ログイン 課題 • ログ収集が遅い • 検索しにくい • グラフがほしい
まとめ 14
より詳しい内容は弊社ブログに 15 CloudWatch LogsからOpenSearchへログ集 約を移行した - CUEBiC TEC BLOG (hatenablog.com)
ありがとうございました 16