DevOps no iFood - Como é o nosso dia a dia

Transcript

1. 1.

   DevOps no iFood Como é o nosso dia a dia

2. 2.

   Eduardo Ximenes Soares Gerente de TI/SRE

3. 3.

   Quem conhece o iFood?

4. 4.

   Alguns números...

5. 5.

   +17M pedidos/mês +150K pedidos/hora

6. 6.

   +17M pedidos/mês +150K pedidos/hora ± 40 pedidos/sec +80 pedidos/sec

7. 7.

   +17M pedidos/mês +150K pedidos/hora +80 pedidos/sec ± 40 pedidos/sec +700K

   pedidos/dia
8. 8.

   +60K restaurantes +500 cidades/BR

9. 9.

   +3M pedidos/logística +200K motoboys/ano

10. 10.

    +12M usuários +300K usuários/hora

11. 11.

    +50k req/s

12. 12.

    Desafios do crescimento...

13. 13.

    None
14. 14.

    None
15. 15.

    Tecnologias...

16. 16.

    None
17. 17.

    None
18. 18.

    None
19. 19.

    None
20. 20.

    CI / CD

21. 21.

    ~ 300 aplicações escaláveis + 1K instâncias em pico +

    300 Deploys Zero Downtime / por semana Multi Region / Multi Account Serverless Kubernetes / Chef / Terraform Resumo
22. 22.

    Mas nem tudo são flores...

23. 23.

    INFRA

24. 24.

    None
25. 25.

    PR - Terraform PR - Chef

26. 26.

    Slow

27. 27.

    Toil

28. 28.

    SRE - De onde veio?

29. 29.

    A grande necessidade de aproximação do time técnico com o

    negócio e o descontentamento dos times de desenvolvimento
30. 30.

    SRE - Por onde começamos

31. 31.

    Split do time em SRE de Projetos e SRE dentro

    dos times de desenvolvimento
32. 32.

    SRE - Onde falhamos

33. 33.

    Os SRE’s dentro dos time de desenvolvimento estavam afastados dos

    projetos e com demandas sem muito desafio técnico
34. 34.

    SRE - Como reagimos

35. 35.

    TOIL: começamos a verificar e analisar os trabalhos repetitivos e

    manuais que consomem grande parte do tempo dos SRE’s
36. 36.

    Como: através de nossas Dailys e classificando os eventos em

    Low, Medium e High
37. 37.

    Low: evento que não afeta, mas é um incômodo Medium:

    tarefas que perdemos parte do tempo High: evento que poderia afetar ou afetou plataforma ou o dia a dia dos desenvolvedores
38. 38.

    Exemplo Medium Toil: perdemos grande parte do tempo arrumando código

    de PR do Terraform Plano de ação: criar pipeline para PR do Terraform
39. 39.

    Atualmente os SRE’s atuam praticamente 50% apoiando os times de

    desenvolvimento e 50% em projetos para resolver Toil e evoluir os processos de automação
40. 40.

    SRE - Não paramos por ai

41. 41.

    Todo Toil High é tratado como Error Budget e fazemos

    Postmortem
42. 42.

    SRE - Próximos passos

43. 43.

    SLO SLA Error Budget

44. 44.

    Obrigado! Eduardo Ximenes Soares duximenes@gmail.com