Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
ログ集約基盤をCloudWatchからOpenSearchに変えてみた
Search
YouYou
August 02, 2022
Technology
480
0
Share
ログ集約基盤をCloudWatchからOpenSearchに変えてみた
詳細ブログ↓
https://cuebic.hatenablog.com/entry/2022/07/11/154446
YouYou
August 02, 2022
More Decks by YouYou
See All by YouYou
AWSマネコンに複数のアカウントで入れるようになりました
yuhta28
2
270
今インフラ技術をイチから学び直すなら
yuhta28
1
280
AWSに詳しくない人でも始められるコスト最適化ガイド
yuhta28
3
660
Datadog外形監視基盤をEC2から ECSへ移行してみた
yuhta28
0
1.8k
アウトプット頑張ったら企業からLT登壇の依頼がきた話
yuhta28
1
1.8k
小さなことから始めるAWSコスト最適入門
yuhta28
1
1.4k
Datadogのコストも監視しよう
yuhta28
1
1k
Rcloneを使った定期的なストレージ同期
yuhta28
0
810
Pulumiを触ってみよう
yuhta28
1
2.7k
Other Decks in Technology
See All in Technology
AIエージェント勉強会第3回 エージェンティックAIの時代がやってきた
ymiya55
0
220
不確実性と戦いながら見積もりを作成するプロセス/mitsumori-process
hirodragon112
1
170
【AWS】CloudTrail LakeとCloudWatch Logs Insightsの使い分け方針
tsurunosd
0
130
脳が溶けた話 / Melted Brain
keisuke69
1
1.2k
Zephyr(RTOS)でOpenPLCを実装してみた
iotengineer22
0
180
AWSで2番目にリリースされたサービスについてお話しします(諸説あります)
yama3133
0
110
SSoT(Single Source of Truth)で「壊して再生」する設計
kawauso
2
410
AIエージェント時代に必要な オペレーションマネージャーのロールとは
kentarofujii
0
280
契約書からの情報抽出を行うLLMのスループットを、バッチ処理を用いて最大40%改善した話
sansantech
PRO
3
340
Oracle AI Database@Azure:サービス概要のご紹介
oracle4engineer
PRO
5
1.3k
やさしいとこから始めるGitHubリポジトリのセキュリティ
tsubakimoto_s
3
2.1k
JEDAI認定プログラム JEDAI Order 2026 受賞者一覧 / JEDAI Order 2026 Winners
databricksjapan
0
480
Featured
See All Featured
Docker and Python
trallard
47
3.8k
It's Worth the Effort
3n
188
29k
Winning Ecommerce Organic Search in an AI Era - #searchnstuff2025
aleyda
1
1.9k
Paper Plane (Part 1)
katiecoart
PRO
0
6.3k
Facilitating Awesome Meetings
lara
57
6.8k
How to train your dragon (web standard)
notwaldorf
97
6.6k
Side Projects
sachag
455
43k
Stewardship and Sustainability of Urban and Community Forests
pwiseman
0
170
Large-scale JavaScript Application Architecture
addyosmani
515
110k
GraphQLとの向き合い方2022年版
quramy
50
14k
Done Done
chrislema
186
16k
Heart Work Chapter 1 - Part 1
lfama
PRO
5
35k
Transcript
ログ集約基盤をCloudWatchから OpenSearchに変えてみた 1
Name:ユータ Occupation:SRE Twitter:@Y0u281 (オーでなくゼロです) ブログ:https://zenn.dev/yuta28 自己紹介 Twitter 2
目次 • 背景 • 実装 • 課題 • 改善 •
よかったこと • まとめ 3
背景 4
背景 5 課題 • ログ収集が遅い • 検索しにくい • グラフがほしい
実装 6 AWS側でCloudWatchのログを OpenSearchに転送してくれる
課題 7 すべてのレコードが文字列型で登 録される!!
改善 8
改善 9 すべてのレコードが文字列型で登 録される!!
改善 10 数値型に変換! Fluentdの設定はブログを 御覧ください
よかったこと 11 専用のIAMユーザーを 発行する必要がなくなった
よかったこと 12 ステータスコード割合
よかったこと 13 解決 • ほぼリアルタイムで検索 • 全文検索で検索性向上 • ダッシュボード作成 •
Google認証で簡単ログイン 課題 • ログ収集が遅い • 検索しにくい • グラフがほしい
まとめ 14
より詳しい内容は弊社ブログに 15 CloudWatch LogsからOpenSearchへログ集 約を移行した - CUEBiC TEC BLOG (hatenablog.com)
ありがとうございました 16