Architektura Asynchroniczna w praktyce na przykładzie BlaBlaCar

Prezentacja z 4Developers 2016

Transcript

1. Asynchroniczna architektura w praktyce (na przykładzie BlaBlaCar) Mirosław Karczmarczyk
2. Tytułem wstępu
3. Tytułem wstępu Connecting people
4. BlaBlaCar w liczbach 30mln użytkowników 20 Instancji Frontu 87 Programistów i architektow 11 Nodów bazy danych 200 Serwerów Mobilnych użytkowników 18mln
5. Co się dzieje po rezerwacji miejsca? Czas Wysyłamy maila do rezerwującego Wysyłamy SMS’a do kierowcy Indeksujemy Zapisujemy w bazie Zbieramy statystyki Odpowiedź
6. Efekt ?
7. A gdyby tak… Czas Wysyłamy SMS’a do kierowcy Wysyłamy maila Indeksujemy Zapisujemy w bazie Zbieramy statystyki Klik…
9. Asynchroniczność… Mikroserwisy!!!
10. • łatwość wdrożenia zmian • niezależność • osobne repozytoria • skalowalność Cechy mikroserwisu
11. Skalowalność aplikacji
12. Komunikacja pomiędzy mikroserwisami Synchroniczna Asynchroniczna Kolejkowanie wiadomości Publisher - Subscriber REST API
13. MAILER Serwis A MAILER Serwis B Workery FRONT Front Load balancer Monitoring / Logi Baza Danych Indekser Cache API Load balancer Serwer kolejkowania wiadomości
15. Konsumer Konsumer Kolejka Publisher Konsumer
16. Fanout Exchange konsumer A konsumer A konsumer B konsumer C Exchange Publisher Kolejka 1 Kolejka 2 Kolejka 3
17. Fanout Exchange
18. Routing keys Publisher konsumer A konsumer A konsumer B konsumer C Exchange Kolejka 1 Kolejka 2 Kolejka 3 route_1 route_2 route_3 route_1 route_2
19. Routing keys
20. Konsumer / worker
21. Konsumer / worker c.d.
22. Konsumer / worker c.d.
23. Pimple - Dependency Injection
24. Pimple - Dependency Injection c.d.
25. Pimple - Dependency Injection c.d.
26. Symfony 2 - RabbitMQBundle
27. Symfony 2 - RabbitMQBundle c.d.
28. Symfony 2 - RabbitMQBundle c.d.
29. Symfony 2 - RabbitMQBundle c.d. $ ./app/console rabbitmq:consumer -m 50 -w testConsumer
30. A co jeśli… …masz 100 (1000 instancji) workerów? … przetwarzasz 2500 do 7500 wiadomości na sekundę w Rabbicie?
32. Długo działające procesy!!!
34. Swarrot - consume them all!!
35. Swarrot - consume them all!!
36. Swarrot - consume them all!!
37. Potrzebujemy czegoś więcej… Swarrot - consume them all!!
38. Swarrot - consume them all!! Enkapsulacja
39. Swarrot - consume them all!!
40. Swarrot - consume them all!!
41. Stack technologiczny BlaBlaCar
42. BlaBlaCar.com/dreamjobs @BlaBlaCarTech Backend Engineers Frontend Engineers iOS Engineers Android Engineers WARSZAWA PARYŻ
44. Źródła: • http://queues.io/ • https://www.rabbitmq.com Przydatne pakiety: • swarrot/swarrot • pimple/pimple • silex/silex • php-amqplib/RabbitMqBundle Podziękowania dla Olivier’a Dolbeau :)