Александр Афенов (Lamoda), Lamoda приехала! В контейнерах, CodeFest 2017

https://2017.codefest.ru/lecture/1217

Мы поговорим о том, как в Lamoda проходит процесс докеризации: со временем in-house разработка десятков различных сервисов потребовала организации более гибкой и прозрачной инфраструктуры. На примере сервиса по обработке заказов расскажем о том, с какими трудностями столкнулись в процессе, и как сформировался итоговый стек технологий.

В программе:
● об IT в Lamoda и сервисе order processing, который будет служить основным примером на протяжении всего доклада
● предпосылки к переходу на docker
● service discovery и оркестрация: наш выбор и обзор альтернатив
● основные проблемы и истории их решения: сеть, логирование, мониторинг, файлы
● плюсы, минусы и промежуточные итоги

Transcript

1. Lamoda приехала! В контейнерах. О том, как мы переходим на докер. Александр Афенов Senior developer Lamoda
2. Кто мы?
3. IT в Lamoda • Подразделения в Москве и Вильнюсе • ~300 сотрудников • In-house разработка 60+ проектов
4. Команда bobcat • Сервис order processing
5. Наши проекты: • Сайт • Мобильные приложения (Android, iOS) • Система управления складом • Менеджмент адресных объектов • Автоматизация работы собственной службы доставки • Сервис по взаимодействию с внешними курьерками • Система рекомендаций • Автоматизация работы студии • Процессинг заказов • Сервис оплаты • …
6. Мы используем:
7. О процессе разработки: • Pull request • Code review • Тестирование
8. Предпосылки к докеризации
9. Разница между окружениями
10. BLACK FRIDAY
11. Разделение ответственности • Администраторы отвечают за железо и сеть • Разработчики отвечают за программное обеспечение • Любая система легко декомпозируется
12. Выбор программного обеспечения
13. Выбор service discovery Consul / ZooKeeper
14. Выбор оркестратора Kubernetes Mesosphere Nomad
15. Синхронизация балансера и Consul
16. Nginx+ Service instance 1 Service instance 2 Service instance N CONSUL
17. traefik Service instance 1 Service instance 2 Service instance N CONSUL
18. Возникшие трудности
19. О логировании • Логи приложения • Access-логи • Логи обменов
20. Fallback balancer Order processing instance CREATE ORDER MySQL Cluster connect I’ve gone away HTTP 500
21. Fallback OpenResty: nginx & LuaJIT
22. Файловые маунты S3 / Ceph
23. Cronjobs Nomad scheduler vs application container
24. Итоги • Единообразное окружение на бою, в тестировании и разработке • Упрощение отладки и воспроизведения проблем • Разработчики не думают о железе • Системные администраторы не касаются работы ПО • Простота технического аудита систем
25. https://www.nomadproject.io/ https://www.nginx.com/products/ https://traefik.io/ https://openresty.org http://ceph.com/
26. Александр Афенов Senior developer Lamoda Вопросы? www.tech.lamoda.ru aleksandr.afenov@lamoda.ru
27. Кейс Swiftmailer tricky failure