Upgrade to Pro — share decks privately, control downloads, hide ads and more …

ログストレージコスパ最強!?OpenObserveを試してみた

Avatar for YouYou YouYou
June 27, 2023
Programming
0
4.4k

 ログストレージコスパ最強!?OpenObserveを試してみた

関連記事↓
https://zenn.dev/yuta28/articles/openobserve-tutorial
Avatar for YouYou

YouYou

June 27, 2023
Tweet

More Decks by YouYou

See All by YouYou
AWSマネコンに複数のアカウントで入れるようになりました
Avatar for YouYou yuhta28
2
200
今インフラ技術をイチから学び直すなら
Avatar for YouYou yuhta28
1
230
AWSに詳しくない人でも始められるコスト最適化ガイド
Avatar for YouYou yuhta28
3
600
Datadog外形監視基盤をEC2から ECSへ移行してみた
Avatar for YouYou yuhta28
0
1.6k
アウトプット頑張ったら企業からLT登壇の依頼がきた話
Avatar for YouYou yuhta28
1
1.5k
小さなことから始めるAWSコスト最適入門
Avatar for YouYou yuhta28
1
1.2k
Datadogのコストも監視しよう
Avatar for YouYou yuhta28
1
930
Rcloneを使った定期的なストレージ同期
Avatar for YouYou yuhta28
0
690
Pulumiを触ってみよう
Avatar for YouYou yuhta28
1
2.4k

Other Decks in Programming

See All in Programming
AWS CDKの推しポイント 〜CloudFormationと比較してみた〜
Avatar for アキキー akihisaikeda
3
220
PT AI без купюр
Avatar for Vladimir Kochetkov v0lka
0
230
Go Modules: From Basics to Beyond / Go Modulesの基本とその先へ
Avatar for kuro kuro_kurorrr
0
110
FormFlow - Build Stunning Multistep Forms
Avatar for Yonel Ceruto González yceruto
1
160
Blueskyのプラグインを作ってみた
Avatar for Hakkadaikon hakkadaikon
1
520
Cline指示通りに動かない？ AI小説エージェントで学ぶ指示書の書き方と自動アップデートの仕組み
Avatar for 葦沢かもめ kamomeashizawa
1
460
社内での開発コミュニティ活動とモジュラーモノリス標準化事例のご紹介/xPalette and Introduction of Modular monolith standardization
Avatar for Mitsuharu Maruyama m4maruyama
0
120
從零到一：搭建你的第一個 Observability 平台
Avatar for Blueswen blueswen
1
890
Beyond Portability: Live Migration for Evolving WebAssembly Workloads
Avatar for Yuki Nakata chikuwait chikuwait
0
350
Gleamという選択肢
Avatar for Comamoca comamoca
6
700
TypeScript LSP の今までとこれから
Avatar for Yosuke Kurami quramy
1
500
無関心の谷
Avatar for kanayannet kanayannet
0
160

Featured

See All Featured
The MySQL Ecosystem @ GitHub 2015
Avatar for Sam Lambert samlambert
251
13k
The Invisible Side of Design
Avatar for Vitaly Friedman smashingmag
299
51k
Measuring & Analyzing Core Web Vitals
Avatar for Philip Tellis bluesmoon
7
480
Adopting Sorbet at Scale
Avatar for Ufuk Kayserilioglu ufuk
77
9.4k
Automating Front-end Workflow
Avatar for Addy Osmani addyosmani
1370
200k
Visualizing Your Data: Incorporating Mongo into Loggly Infrastructure
Avatar for mongodb mongodb
46
9.6k
Distributed Sagas: A Protocol for Coordinating Microservices
Avatar for Caitie McCaffrey caitiem20
331
22k
Chrome DevTools: State of the Union 2024 - Debugging React & Beyond
Avatar for Addy Osmani addyosmani
6
690
Thoughts on Productivity
Avatar for Jon Yablonski jonyablonski
69
4.7k
Facilitating Awesome Meetings
Avatar for Lara Hogan lara
54
6.4k
Fight the Zombie Pattern Library - RWD Summit 2016
Avatar for Marcelo Somers marcelosomers
233
17k
Rails Girls Zürich Keynote
Avatar for Gregor Martynus gr2m
94
14k

Transcript

  1. ログストレージコスパ最強!? OpenObserveを試してみた 1

  2. Name：ユータ Occupation：SRE Twitter：@Y0u281 （オーでなくゼロです） ブログ：https://zenn.dev/yuta28 自己紹介 Twitter 2

  3. 皆さんはこう思ったことはあり ませんか？ 3

  4. ログの保存料金が高い 4

  5. 5

  6. 6

  7. 聴講者 • ログのコストを気にしている人 • 監視基盤構築担当者 • 新しいもの好き 7

  8. 目次 • OpenObserveとは？ • OpenObserveの利点 • 低コストについて • 課題 •

    まとめ 8

  9. OpenObserveとは？ • ログ、メトリクス、トレース監視を一元管理できるプラットフォーム • セルフホスト利用かクラウドサービスが提供されている • ストレージコストが他のサービスと比較して1/140(!!!) • ペタバイト相当のスケーリングが可能 9

  10. OpenObserveの利点 • 高い圧縮率によって実現した圧倒的な低コスト • すぐに始めることができる無償クラウドプラン • 日本語表示もある 10

  11. 低コストについて 1/140はHA構成のElasticSearchと比較した場合 • 3台のEBSを使うESとS3を使うOpenObserve 11

  12. 低コストについて 1/140はHA構成のElasticSearchと比較した場合 • 3台のEBSを使うESとS3を使うOpenObserve 12

  13. 低コストについて 1/140はHA構成のElasticSearchと比較した場合 • 3台のEBSを使うESとS3を使うOpenObserve 13

  14. 低コストについて 1/140はHA構成のElasticSearchと比較した場合 • 3台のEBSを使うESとS3を使うOpenObserve 14

  15. 課題 • ログ転送は自前で実装しなければならない • インデックスを作成しないため検索速度は遅い • メトリクス/トレースも他OSSからの情報を自前で収集しなければ ならない • ログ検索はやや学習コスト高

    15

  16. まとめ 16

  17. まとめ 17 • コスト　　　安 • 学習難易度　高　

  18. ありがとうございました より詳しい内容は以下のブログで↓ ログコスパ最強!?OpenObserveを触って みた 18