Construindo um api de dados esportivos que responde a 6000 req/s

Falo um pouco sobre a experiência de de construir uma API de dados esportivos que é usada pela Globo.com e parceiros, que responde hoje a 6000 req/s.O resultado do investimento na construção de uma nova API, problemas encontrados e soluções aplicadas usando as tecnologias como Python, Tornado, Redis, C e Nginx.

Transcript

1. Construindo uma API de dados esportivos que responde 6000 req/s sexta-feira, 8 de novembro de 13
2. eu • Desenvolvedor apaixonado • Programador poliglota • Jogador de Magic e RPG • DJ nas horas vagas • Globo.com / esportes sexta-feira, 8 de novembro de 13
3. estado anterior • 150 req/s • documentação ruim • serviços inconsistentes • base de código ruim sexta-feira, 8 de novembro de 13
4. requisitos • Acesso externo • Controlade • Escalabilidade • Velocidade sexta-feira, 8 de novembro de 13
5. tecnologias sexta-feira, 8 de novembro de 13
6. camadas internas sexta-feira, 8 de novembro de 13
7. camadas internas Controller sexta-feira, 8 de novembro de 13
8. camadas internas Controller Repository sexta-feira, 8 de novembro de 13
9. camadas internas Controller Model Repository sexta-feira, 8 de novembro de 13
10. camadas internas Controller Model Repository View sexta-feira, 8 de novembro de 13
11. model / view set min set max sexta-feira, 8 de novembro de 13
12. model / repository jogo.equipe_mandante.nome X X X sexta-feira, 8 de novembro de 13
13. model / repository jogo.equipe_mandante.nome X X X sexta-feira, 8 de novembro de 13
14. model / repository jogo.equipe_mandante.nome X X X ids = [jogo.equipe_mandante_id, jogo.equipe_visitante_id] equipe_repository = EquipeRepository() equipes = equipe_repository.get_equipes(ids) sexta-feira, 8 de novembro de 13
15. cache back-end lista de jogos classificação ficha Romário Romário 1 1 2 3 redis mysql sexta-feira, 8 de novembro de 13
16. expiração ativa SDE API /atletas/romario /equipes/flamengo/elenco Cache SDE Admin Banco de sexta-feira, 8 de novembro de 13
17. expiração ativa SDE API /atletas/romario /equipes/flamengo/elenco Cache SDE Admin Banco de sexta-feira, 8 de novembro de 13
18. expiração ativa SDE API /atletas/romario /equipes/flamengo/elenco Cache atletas savio, nelio, romario atleta nelio atleta savio atleta romario SDE Admin Banco de sexta-feira, 8 de novembro de 13
19. expiração ativa SDE API /atletas/romario /equipes/flamengo/elenco Cache atletas savio, nelio, romario atleta nelio atleta savio atleta romario SDE Admin Banco de sexta-feira, 8 de novembro de 13
20. expiração ativa SDE API /atletas/romario /equipes/flamengo/elenco Cache atletas savio, nelio, romario atleta nelio atleta savio atleta romario SDE Admin Banco de sexta-feira, 8 de novembro de 13
21. expiração ativa SDE API /atletas/romario /equipes/flamengo/elenco Cache atletas savio, nelio, romario atleta nelio atleta savio atleta romario SDE Admin Banco de sexta-feira, 8 de novembro de 13
22. expiração ativa SDE API /atletas/romario /equipes/flamengo/elenco Cache atleta nelio atleta savio SDE Admin Banco de sexta-feira, 8 de novembro de 13
23. Nginx - AAA web Autenticação Acesso Autorização Monitoração token: aaa Nginx- AAA Redis sexta-feira, 8 de novembro de 13
24. Nginx - AAA web Autenticação Acesso Autorização Monitoração token: aaa Nginx- AAA Redis Com 1000 req simultâneas em 120ms sexta-feira, 8 de novembro de 13
25. Nginx - AAA sexta-feira, 8 de novembro de 13
26. Nginx - AAA sexta-feira, 8 de novembro de 13
27. Nginx - AAA sexta-feira, 8 de novembro de 13
28. cache front-end Nginx - AAA Nginx - cache SDE API SDE API SDE API web sexta-feira, 8 de novembro de 13
29. documentação sexta-feira, 8 de novembro de 13
30. sde-api sexta-feira, 8 de novembro de 13
31. sde-api 6000 req/s sexta-feira, 8 de novembro de 13
32. contatos rafael.mws@gmail.com @rafael_mws sexta-feira, 8 de novembro de 13