Telemetria em codebases Elixir

Em tempos onde desenvolvimento de software se torna cada vez ágil, reagir com velocidade ao que acontece em produção é fundamental. Dentro desse aspecto, ter mecanismos robustos de observabilidade tem um papel muito importante. Nessa palestra será apresentado um case de como foi construída a telemetria através de logs, métricas e traces no SumUp Bank, cujo backend é inteiramente construído com Elixir e como isso empodera o time a fazer deploys tranquilamente numa sexta-feira à tarde.

Transcript

1. Telemetria em codebases Elixir Daniel Pilon
2. Quem sou eu?
3. Engineering Manager @daniel_pilon @daniel-pilon @danielpilon
4. Vamos dar um passo para trás...
5. Observabilidade
6. Telemetria Agregação de logs Métricas Trace distribuído
7. Monitoramento
8. Ferramentas
9. E o Elixir com isso?
10. Agregação de Logs
11. defmodule Module do require Logger def fun() do Logger.info("Something happened...") Logger.warn("Something suspicious happened...") Logger.error("Something bad happened...") end end
12. config :logger, backends: [LoggerJSON] # https://github.com/Nebo15/logger_json config :logger_json, :backend, metadata: :all, formatter: LoggerJSON.Formatters.DatadogLogger
13. Logger.metadata( some_metadata: :some_value, another_metadata: :another_value ) )
14. defmodule MyPhoenixApp.Endpoint do use Phoenix.Endpoint, otp_app: :my_phoenix_app ... plug Plug.RequestId ... end
15. defmodule MyBroadwayConsumer do use Broadway use LogRequestDecorator @impl Broadway @decorate trace_broadway_message_request_id() def handle_message(_processor, msg, _context) do ... end end
17. Métricas
19. :telemetry.execute( [:consumer, :events, :messages, :total_failed], %{quantity: 1}, %{type: :event_type} )
20. metadata = %{} :telemetry.span( [:consumer, :events, :processing], metadata, fn -> result = # .. do the message processing .. {result, %{metadata: "Additional metadata"}} end )
21. :telemetry.attach( "some-unique-handler-id", [:consumer, :events, :messages, :total_failed], &handle_event/4, nil) def handle_event(event, measurements, metadata, cnf) do # handle as you prefer! end
22. defmodule MyPrometheusTelemetrySupervisor use Supervisor import Telemetry.Metrics def init(_arg) do children = [ {TelemetryMetricsPrometheus, [port: 8123, metrics: metrics()] } ] Supervisor.init(children, strategy: :one_for_one) end end
23. def metrics do [ counter("consumer.events.messages.total_handled", event_name: [:cons, :evts, :msgs, :total], measurement: :quantity, tags: [...] # keys to extract from metadata ) .. ] end
25. Tracing distribuído
28. {:opentelemetry_api, "~> 0.6.0"}, {:opentelemetry, "~> 0.6.0"}, {:opentelemetry_exporter, "~> 0.6.0"}, {:opentelemetry_ecto, "~> 0.1.0"}, {:opentelemetry_phoenix, "~> 0.2.0"}, {:opentelemetry_tesla, "~> 1.3.1-rc.1"}, {:open_telemetry_decorator, "~> 0.5.4"}
29. def start(_type, _args) do OpenTelemetry.register_application_tracer(:my_app) OpentelemetryEcto.setup([:my_app, :repo]) OpentelemetryTesla.setup() OpentelemetryPhoenix.setup() end
30. config :opentelemetry, :processors, otel_batch_processor: %{ exporter: {:opentelemetry_exporter, %{endpoints: [ {:http, "http://otel-host, 55680, []}]}} }
31. defmodule Module do use OpenTelemetryDecorator @decorate_all simple_trace() @decorate trace("module.fun") def fun(arg1, arg2) do ... end end
33. Concluindo...
34. Ajude seu software a te ajudar
35. Favorecer que times trabalhem em observabilidade é um ato de empatia
36. Elixir oferece toda simplicidade e robustez para observabilidade
37. Acompanhem e colaborem com o OpenTelemetry
38. Muito obrigado