Алексей Кирпичников «Восток — правильная телеметрия для микросервисов на .NET»

Компания Контур выкладывает в open source инструменты, которые использует для эксплуатации .NET-микросервисов. В докладе поговорим о телеметрии: централизованном сборе метрик, логов и распределенной трассировке. Алексей поделится идеями и кодом, который позволяет безболезненно эксплуатировать тысячи микросервисов, написанные сотнями разработчиков в десятках продуктовых команд Контура.

Доклад будет полезен разработчикам приложений с микросервисной архитектурой на платформе .NET, которые понимают, насколько важен мониторинг приложений в продакшне через централизованный сбор метрик, агрегацию логов и распределённых трассировок сетевых вызовов.

Transcript

1. Восток Правильная телеметрия для микросервисов на .NET Алексей Кирпичников Контур
5. Правильный продакшн — Метрики — Логи — Трассировки — Конфигурация — Service discovery — Деплой — Хостинг
6. Правильный продакшн — Метрики — Логи — Трассировки — Конфигурация — Service discovery — Деплой — Хостинг
7. Метрики private readonly Timer timer = Metric.Timer("Requests", Unit.Requests); public void Process(string documentId) { using (var context = timer.NewContext(documentId)) { ActualProcessingOfTheRequest(documentId); } } github.com/Recognos/Metrics.NET
8. Метрики MyService.host01.Requests.Duration-p95 875 1520758574 MyService.host01.Requests.Duration-p99 1564 1520758574
9. Метрики
10. Логи
11. Логи { "@timestamp": "2017-11-13T13:11:17.0275008Z", "AppDomain": "Store.Api.exe", "HostName": "REVISE-CONS-08", "Level": "INFO", "LoggerName": "request", "Message": "Incoming request GET /store/v1/shops", ...
12. Логи { "@timestamp": "2017-11-13T13:11:17.0275008Z", "AppDomain": "Store.Api.exe", "HostName": "REVISE-CONS-08", "Level": "INFO", "LoggerName": "request", "Message": "Incoming request GET /store/v1/shops", ...
14. Трассировки
15. Трассировки фронт
16. Трассировки авторизация биллинг база данных хранилище файлов
17. Трассировки …
18. Трассировки … traceId
19. Трассировки … span
20. Трассировки { "TraceId": "bade332746024d6ea45d33237e36c361", "SpanId": "ad23e9c9000000000000000000000000", "OperationName": "HTTP", "BeginTimestamp": "2017-11-13T15:49:17.2180000+03:00", "EndTimestamp": "2017-11-13T15:49:37.3906473+03:00", "Annotations": { "OriginHost": "vm-livechat2", "OriginId": "LiveChat.Service", "IsClientSpan": false } }
22. Трассировки { "TraceId": "bade332746024d6ea45d33237e36c361", "SpanId": "ad23e9c9000000000000000000000000", "OperationName": "HTTP", "BeginTimestamp": "2017-11-13T15:49:17.2180000+03:00", "EndTimestamp": "2017-11-13T15:49:37.3906473+03:00", "Annotations": { "OriginHost": "vm-livechat2", "OriginId": "LiveChat.Service", "IsClientSpan": false } }
23. Логи { "@timestamp": "2017-11-13T13:11:17.0275008Z", "AppDomain": "Store.Api.exe", "HostName": "REVISE-CONS-08", "Level": "INFO", "LoggerName": "request", "Message": "Incoming request GET /store/v1/shops", ...
24. Метрики MyService.host01.Requests.Duration-p95 875 1520758574 MyService.host01.Requests.Duration-p99 1564 1520758574
25. Airlock Client метрики логи трассировки HTTP межсервисное взаимодействие github.com/vostok/launchpad
26. Airlock Gate HTTP Kafka github.com/vostok/airlock.gate
27. Graphite Elastic Contrails ... github.com/vostok/airlock.consumer
35. Airlock Client Airlock Gate Kafka Graphite Elastic Contrails ...
36. Airlock Client Airlock Gate Kafka Graphite Elastic Contrails ... Spaceport github.com/vostok/spaceport github.com/vostok/launchpad
37. Демо-трассировки — 8fce28c6-985b-4d51-b474-ca93032fafeb — 831a3146-d50f-4fe1-b91e-d37b3197670d — 84cbafbc-40b3-49b9-ac4e-28fab6099c58 vostok.github.io/contrails-demo/
38. Правильный продакшн — Метрики — Логи — Трассировки — Конфигурация — Service discovery — Деплой — Хостинг
39. Алексей Кирпичников Контур alexkir@kontur.ru github.com/vostok