Infra-Compose - Desenvolvedores com autonomia para compor recursos de infraestrutura!

Transcript

2. Paulo Lobato Analista DevOps @ Méliuz paulolobatojr
3. Infra-compose - Desenvolvedores com autonomia para compor recursos de infraestrutura!
4. Cenário
5. CENÁRIO • Migração dos monólitos para arquitetura de microsserviços, com isso muitos serviços surgindo em paralelo e rapidamente.
6. Problema
7. PROBLEMA • Dezenas de desenvolvedores com prazos "desafiadores" requisitando o provisionamento de recursos para um time muito pequeno de infra.
8. PROBLEMA • A comunicação entre os devs e infra não era tão clara e durante o desenvolvimento tinham muitas mudanças.
9. PROBLEMA • O time de infra virou um gargalo para o lançamento de novos serviços, pois a vazão da entrega dos recursos de infra era demorada.
10. Primeira Solução
11. PRIMEIRA SOLUÇÃO
12. PRIMEIRA SOLUÇÃO • Escrever os códigos da infra sob demanda
13. PRIMEIRA SOLUÇÃO • Redundância de códigos (copy/paste) • Código centralizado (infra) • Permissão para provisionar • Dados sensíveis (bancos de dados, criptografia...)
14. PRIMEIRA SOLUÇÃO • Durava em média 2 dias o provisionamento
15. FERRAMENTAS EXTERNAS • Grande parte dos recursos dos serviços provisionados tinham características comuns, por exemplo: ◦ Bancos de dados ◦ Filas ◦ Chaves de criptografia ◦ Usuários
16. Segunda Solução
17. SEGUNDA SOLUÇÃO • Módulos (reusabilidade) • Padronização
18. SEGUNDA SOLUÇÃO • Dependência do time de infra • Permissão para provisionar • Dados sensíveis (bancos de dados, criptografia...)
19. SEGUNDA SOLUÇÃO • Durava em média 1 dia o provisionamento
20. Gargalo ainda é infra
21. Terceira Solução
22. TERCEIRA SOLUÇÃO • Vamos escalar dando autonomia e responsabilidade para os devs provisionar os recursos de infra do seu projeto de forma segura e simples.
23. TERCEIRA SOLUÇÃO • Terraform Enterprise • Ansible Tower
24. TERCEIRA SOLUÇÃO • HCL • Controle de acesso • Complexidade (descentralização/esquec imento) • Sincronização com CI/CD
25. Infra Compose
26. INFRACOMPOSE
27. Infra Compose YAML
28. INFRACOMPOSE
29. INFRACOMPOSE
30. Infra Compose fluxo
31. INFRACOMPOSE IC YAML YAML/HCL PARTS HCL HOOKS FINAL HCL HCL $ terraform init $ terraform apply meliuz/infra-compose:<tag>
32. INFRACOMPOSE Provisionamento
33. INFRACOMPOSE
34. INFRACOMPOSE • Reusabilidade (Módulos e Ferramentas)
35. INFRACOMPOSE • Reusabilidade (Módulos e Ferramentas) • Projeto autocontido
36. INFRACOMPOSE • Reusabilidade (Módulos e Ferramentas) • Projeto autocontido • Portabilidade (versão)
37. INFRACOMPOSE • Reusabilidade (Módulos e Ferramentas) • Projeto autocontido • Portabilidade (versão) • Centralização no CI/CD ( deploy)
38. INFRACOMPOSE • Reusabilidade (Módulos e Ferramentas) • Projeto autocontido • Portabilidade (versão) • Centralização no CI/CD ( deploy) • Controle de acesso
39. • Abstração ◦ Cloud Provider ◦ IaC ◦ Configurações complexas ◦ Configurações padrões INFRACOMPOSE
40. • Abstração ◦ Cloud Provider ◦ IaC ◦ Configurações complexas ◦ Configurações padrões • Idempotência INFRACOMPOSE
41. • Abstração ◦ Cloud Provider ◦ IaC ◦ Configurações complexas ◦ Configurações padrões • Idempotência • Simplicidade (devs) INFRACOMPOSE
42. Infra Compose config
43. INFRACOMPOSE
44. INFRACOMPOSE
45. Infra Compose roles
46. INFRACOMPOSE
47. INFRACOMPOSE
48. INFRACOMPOSE
49. INFRACOMPOSE
50. Resultado
51. • Provisionamento dos recursos em minutos INFRACOMPOSE
52. • Provisionamento dos recursos em minutos • Remoção de ruídos de comunicação entre times INFRACOMPOSE
53. • Provisionamento dos recursos em minutos • Remoção de ruídos de comunicação entre times • Autonomia para os devs comporem os recursos INFRACOMPOSE
54. • Provisionamento dos recursos em minutos • Remoção de ruídos de comunicação entre times • Autonomia para os devs comporem os recursos • Dados sensíveis protegidos INFRACOMPOSE
55. • Provisionamento dos recursos em minutos • Remoção de ruídos de comunicação entre times • Autonomia para os devs comporem os recursos • Dados sensíveis protegidos • O time de infra não é mais o gargalo INFRACOMPOSE
56. • Provisionamento dos recursos em minutos • Remoção de ruídos de comunicação entre times • Autonomia para os devs comporem os recursos • Dados sensíveis protegidos • O time de infra não é mais o gargalo • Padronização da infra INFRACOMPOSE
57. • Provisionamento dos recursos em minutos • Remoção de ruídos de comunicação entre times • Autonomia para os devs comporem os recursos • Dados sensíveis protegidos • O time de infra não é mais o gargalo • Padronização da infra • Cultura DevOps INFRACOMPOSE
58. • Provisionamento dos recursos em minutos • Remoção de ruídos de comunicação entre times • Autonomia para os devs comporem os recursos • Dados sensíveis protegidos • O time de infra não é mais o gargalo • Padronização da infra • Cultura DevOps • Mais tempo para infra trabalhar em outras melhorias INFRACOMPOSE
59. Problemas/Limitações
60. • Mudança de versão dos recursos • Granularidade de permissões AWS • Necessita previamente da criação dos módulos Terraform pelo time de infra (métricas) • Remover recursos com persistência (banco de dados, logs...) INFRACOMPOSE
61. Planos futuros
62. • Aprovação manual para remoção de recursos • Fluxo de atualização de risco (Snapshot, backup...) • Integração com WAF, Kubernetes, Istio... INFRACOMPOSE
63. Open Source?
64. Obrigado! paulolobatojr Estamos contratando: jobs.lever.co/meliuz