SETCON'19 - Sergey Velhas - Deliveryman как мы строили свой CD

Transcript

1. Sergei Velhas s@velhas.net Team Lead, Eurasian Processing Company (ЕПК) | ЕПК) | E10) | E100 Holding D D D D eliveryman: как мы строили свой C
2.  Что такое Continuous Integration/Delivery и зачем они нужны  К) | E10ак команда пришла от CI к CD  Стоит ли?  Что мы узнали  О трудностях  О перспективах Eurasian Processing Company
3. Что это за CI/CD? 01
4. Continuous Integration - практика постоянного слияния кода и выполнения частых автоматизированных сборок проекта для скорейшего выявления потенциальных дефектов и решения интеграционных Eurasian Processing Company
5. Eurasian Processing Company “Continuous Delivery – практика разработки ПО, при которой ПО может быть выпущено «в бой» в любое время.” Martin Fowler
6. Тест до пуша Синтаксис, запуск, автоматические тесты Тест после пуша Автоматические тесты, регрессионные тесты, стейджинг Тест прежде деплоя Тест производительности, интеграционный Eurasian Processing Company { | } CI Fail early. Fail fast. Fail often.
7. К делу 02
8. Команда Нового Биллинга E100  Не менее 1’817 вариантов расчета цены  700’000+ транзакций в месяц; 1M+ скоро (ЕПК) | 3mo) mo)  Бизнес компании растет на >30% в год  300’000$ за 1 час недоступности услуг  Наши пользователи – сотрудники компании  Вторая подсистема – К) | E10лиентский Изображение Eurasian Processing Company
9. 4 среды Eurasian Processing Company Dev 4️ 4️ 4️ 4️ 4️ 4️ 4️ 4️ 4️ 4️ 4️ 4️ 4️ 4️ Test 4️ 4️ 4️ 4️ 4️ 4️ 4️ 4️ 4️ 4️ 4️ 4️ 4️ 4️ Пре-prod 9️ 9️ 9️ 9️ 9️ 9️ 9️ 9️ 9️ 9️ 9️ 9️ 9️ 9️ Prod 7️ 7️ 7️ 7️ 7️ 7️ 7️ 7️ 7️ 7️ 7️ 7️ 7️ 7️
10.  DMZ и внутренняя сеть  30+ сервисов + софт других отделов  Автоматизация в архитектуре  CI собирал отдельно (ЕПК) | не было пакетов ПО; не было возможности выкатить сборку на другую среду)  Отказо- и катастрофоустойчивость Eurasian Processing Company
11. Q 30 Eurasian Processing Company Mark Deploy ⚠ Marker Document ⚠ Log actions PostDeploy: ⚠ warmup ⚠ smoke test If (3) Deploy: migrate DB ⚠ firewall Uninstall Install ⚠ start Backup: ⚠ DB ⚠ soft PreDeploy: ⚠ discoverDep configure create dirs copy ⚠ stop InitDeploy: что - {BUILD},BUILD}, куда - {BUILD},dev..prod} Prepare servers ⚠ Install soft ⚠ Configure IIS ⚠ Provision Users
12. Eurasian Processing Company Git CI: CCNET / Gitlab CD: Ansible Серверы Kerberos WinRM
13. Гипотеза Проверка Взлетает Eurasian Processing Company 3 дня проверка 1 неделя: на DEV Около месяца до готовности на PROD
14. Eurasian Processing Company ЧУТЬ ЗАРЕФАКТОРИТЬ
15. Eurasian Processing Company conf playbook инвентарь ️️ ️ ️️ ️ ️️ ️ ️️ ️ ️️ ️ ️️ ️ ️️ ️ ️️ ️ ️️ ️ ️️ ️ ️️ ️ ️️ ️ ️️ ️ ️️ ️
16. А сейчас со всей этой… Eurasian Processing Company МЫ ПОПЫТАЕМСЯ ВЗЛЕТЕТЬ!
17. Стоит ли? 03
18. Eurasian Processing Company
19. Теперь это вторник: 20 деплоев Eurasian Processing Company прежде: 1 релиз в несколько дней релизы чаще в 100 РАЗ У 4 разработчиков с 2 QA инженерами
20. QA сам работает с тестовыми средами Eurasian Processing Company Разработчики в «волне»
21. Раз уж взялись то и серверы настраивае т машина Eurasian Processing Company
22. Eurasian Processing Company
23. Teams но у компании приобретен Office3mo) 65 и Slack… Изображение Eurasian Processing Company
24. CI Изображение Eurasian Processing Company
25. Выкатки чаще Выкатки чище Параллельность, 100% uptime Сложные сценарии выкатки не проблема Eurasian Processing Company Fail early. Fail fast. Fail often.
26. Сократилось время деплоя на продакшен Eurasian Processing Company Было: 2 часа Стало: минуты. Основное на бэкап
27. Eurasian Processing Company
28. Что мы узнали 04
29. Eurasian Processing Company CD своими руками это реально
30. Eurasian Processing Company Не катитесь вручную Если есть возможность или перспектива автоматизации
31. Eurasian Processing Company Что узнали? Windows Server is still Windows Пипл ️ ️ ️ ️ ️ ️ ️ ️ ️ ️ ️ ️ ️ ️ RDP?
32. Eurasian Processing Company “WinRM: JSON SIZE EXCEEDED ON COPY” HWAT?!!!!!!!!!!!!!!
33. Любую хорошую идею можно подпортить. Миграции .NET и Core БД Eurasian Processing Company Что узнали?
34. Eurasian Processing Company MS Teams = Slack от Microsoft? 20kb – awkward silence HTTP 500 #Возможности Поиск Тормоза
35. MOAR! 05
36. Eurasian Processing Company GitlabCI + бот в MS Teams
37. Eurasian Processing Company Стабильное конфигурирование Windows
38. Eurasian Processing Company 0% deployme nt downtime
39. Eurasian Processing Company Мониторинг препродакшен
40. Вопросы? Сергей Вельгас s@velhas.net Eurasian Processing Company E100
41. Eurasian Processing Company Octopus Пробовал Отличная штука Очень советую OctopusDeploy/Issues/Open 358