Extraindo o ouro do Service Mesh (Getting the gold from Service Mesh)

Como podemos gerar: dashboards e alertas baseados em métricas do Istio via Prometheus

How to build: dashboards and alerts based on Istio's metrics from Prometheus

Transcript

1. Victor Santos - DevOps 17/Out/2018 Extraindo o ouro do Service Mesh Como podemos gerar: dashboards e alertas baseados em métricas do Istio via Prometheus
2. Por que eu preciso disso? Developers App Monitoring Tools Deploy Push/Pull Metrics
3. Como tudo funciona? Istio Prometheus Grafana
4. Como tudo funciona? Istio Prometheus Grafana
5. Como tudo funciona? Istio Prometheus Grafana
6. Como tudo funciona? ‣ opensource escrita em Go (2012 - Soundcloud) ‣ Conjunto de tools de monitoria e alarme ‣ Não é necessário daemon de métrica no node ‣ Faz o uso de exporters para expor as métricas de terceiros ‣ Faz o uso de scraping nos exporters para a coleta das métricas
7. Como tudo funciona? ‣ alertmanager para o gerenciamento de alarmes ‣ Alertas configurados via alert-rules ‣ Notificações externas: Email, Slack, Pagerduty, etc
8. Como tudo funciona? Istio Prometheus Grafana
9. Como tudo funciona? ‣ opensource <3 ‣ lhe permite criar dashboards e views ‣ Conceito de datasources: CloudWatch, Prometheus, Datadog, MySQL, ElasticSearch, etc… ‣ Lhe permite configurar alertas básicos baseados em thresholds: Slack, Pagerduty, Email, VictorOps, Sensu, Telegram, etc…
10. Como tudo funciona? component: Istio telemetry App 1
11. Como tudo funciona? component: Istio telemetry App 1 App 2
12. Como tudo funciona? component: Istio telemetry App 1 App 2 App n
13. Como tudo funciona? /metrics component: Istio telemetry App 1 App 2 App n
14. Como tudo funciona? /metrics component: Istio telemetry App 1 App 2 App n datasource
15. HPA (Horizontal Pod Autoscaler) ‣ Métrica padrão: CPU / Memória ‣ Passos para a implementação: ‣ habilite autoscaling custom metrics (cluster) ‣ instale prometheus-adapter (custom metrics) ‣ suba os yamls do HPA apontando para o deployment/ replicaset
16. Como vamos simular? /metrics component: Istio telemetry Response Mocker datasource Install response-mocker 1.
17. Como vamos simular? /metrics component: Istio telemetry Response Mocker datasource HTTPS Request /endpoint Install response-mocker 1. 2.
18. Como vamos simular? /metrics component: Istio telemetry Response Mocker datasource HTTPS Request /endpoint Install response-mocker 1. 2. 3.
19. Como vamos simular? /metrics component: Istio telemetry Response Mocker datasource HTTPS Request /endpoint Install response-mocker 1. 2. 4. 3.
20. Como vamos simular? /metrics component: Istio telemetry Response Mocker datasource HTTPS Request /endpoint Install response-mocker Slack notification 1. 2. 4. 5. 3.
21. Vamos ver na prática!
22. Considerações finais ‣ prometheus-operator (prometheus + alertmanager) ‣ grafana standalone ‣ dashboards default do Istio ‣ alarmes via alertmanager ‣ sem $$$ envolvido
23. Dúvidas?
24. That’s all folks! Para críticas, dúvidas, sugestões e/ou nos chamar para os happy hours da galera: ‣ Gmail: vsantos.py ‣ In: /jvictorssouza ‣ Github: vsantos/meetup 17/Out/2018