Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
agentless metric collection for Amazon EKS
Search
clouddev-code
January 22, 2024
0
200
agentless metric collection for Amazon EKS
clouddev-code
January 22, 2024
Tweet
Share
More Decks by clouddev-code
See All by clouddev-code
ECS EBS integation の概要、ユースケース
cloudevcode
0
280
ELYA-japanese-Llama-2-7bを Rust(WASM)で動かしてみた
cloudevcode
1
88
DataZoneどこまで使えるものか
cloudevcode
1
85
adot-collectorを本番環境に導入してみた
cloudevcode
0
71
awsCustomResourceで作成してみた
cloudevcode
0
28
EdgeTPUを使ってみよう
cloudevcode
0
12
Featured
See All Featured
Distributed Sagas: A Protocol for Coordinating Microservices
caitiem20
323
20k
Design by the Numbers
sachag
274
18k
Building Effective Engineering Teams - LeadDev
addyosmani
33
1.9k
Writing Fast Ruby
sferik
622
60k
How to Ace a Technical Interview
jacobian
273
22k
Templates, Plugins, & Blocks: Oh My! Creating the theme that thinks of everything
marktimemedia
20
1.8k
JavaScript: Past, Present, and Future - NDC Porto 2020
reverentgeek
41
4.4k
Web development in the modern age
philhawksworth
203
10k
Building an army of robots
kneath
300
41k
Ruby is Unlike a Banana
tanoku
96
10k
Debugging Ruby Performance
tmm1
70
11k
Keith and Marios Guide to Fast Websites
keithpitt
408
22k
Transcript
Agentless metric Collection for EKS AWS-UG横浜 #68 JAWS-UG横浜 #68 AWS
re:Invent 2023 Recap Container 2024/01/20 #jawsug #jawsugyokohama 1
About us Soushi Hiruta 2 agentless metric collection for Amazon
EKSについて検証してみました https://zenn.dev/clouddevcode/articles/067b17367dc71f
Agenda ▸ agentless metrics Collection for EKSとは ▸ agentless metrics
Collection for EKSの仕組み ▸ まとめ ▸ Q&A 3
agentless metrics collectorとは 4 Prometheus コレクターは、クラスター内でコレクターを実行することなく、Amazon EKS アプリケーションとインフラストラクチャからメトリックスを検出して収集するスク レイパーで構成されています。 https://aws.amazon.com/blogs/mt/how-unitary-achieved-automatic-metric-collection-with-amazon-managed-service-for-prometheus-collector/
agentless metrics collectionの仕組み 5 • Podのprometheus metricsに対して Scraperが収集
agent less collectorの図解 6 • Scraperを作成すると Network interfaceが 作成される。 •
inteface typeが Lambdaとなっていた。 • なんどかScraperの作 成試したが、15分程度 はかかっているように みえる。
始め方 7 https://zenn.dev/clouddevcode/articles/067b17367dc71f
Distro for OpenTelmetryとの比較 8 AWS Distro for OpenTelemetry Agentless metrics
collector 対応プラットフォーム ECS, EKS ※ECSの場合は、sidecar要 EKS 収集方法 ADOT Collector Scraper なにを収集 log, metrics ,trace metrics 送信先 Amazon managed for prometheus, X-Ray Amazon managed for prometheus 所感 sidecarで収集する場合はメモリリ ミット要 収集されるサイズに制限あり
ユースケースと適切な選択 9 • コレクターがマルチ AZ、高可用性、および自動スケーリング
削除時の注意点 10 • Scraper自体は個別で削除しないといけない
まとめ • Collectorが、Mulit-AZ、高可用性、拡張性をもっている • prometheusメトリクスだけとるのであれば利用できる。 • トレース等もとりたいのであれば、Distro for OpenTelemetryがよさそう 11
ELYZA-japanese-Llama-2 ModelをWasmEdgeで OpenAI Compactible APIを作成 12