Тестирование деплоя

О современных подходах к проверки вашего CI/CD, который вы только собираетесь настроить и внедрить.

Transcript

1. Тестирование деплоя Юрий Хрусталев, Deep Refactoring, 31.07.2017
2. Пока команда с непрерывной интеграцией ожидает прохождения тестов, команда с непрерывным деливери уже успела накатить версию, откатить ее и фиксит баги.
3. О чем это? • Определенность • Интеграция • Технический долг • Правильный выбор • Методы проверки
4. CI/CD
5. Какие проблемы? • Мало кто следует всем рекомендациям Спольски • Отсутствует staging среда • Фиксация на монолитных приложениях с монолитным тестированием • Мало кто пишет инфраструктурный код да и мало кому он интересен • Неопределенность процесса • Нет интеграционного тестирования
6. Что такое Staging?
7. TestOps • Установка приложения по сценариям продакшена • Использование вашего любимого Chef/Puppet/Ansible/Stonic • Проверка чистой установки • Проверка обновления • Тестирование инфраструктуры • Тестирование сценариев • Интеграционное тестирование
8. Тестирование инфраструктуры
9. Оркестрирование Kitchen • Знает AWS/Vagrant/OpenStack/Libvirt/... • Не используйте Docker! (деплоить не бросайте) • Умеет Ansible/Chef/Puppet/... (кроме Stonic) ◦ (https://github.com/neillturner/kitchen-ansible) • Serverspec/Inspec/bats/... • Написано на ruby • Тесно интегрировано с chef
10. Пример Kitchen --- driver: name: vagrant synced_folders: - ['.', '/home/app] provisioner: playbook: provisioning/setup.yml name: ansible_playbook roles_path: provisioning/roles hosts: workers require_chef_for_busser: false require_ruby_for_busser: true additional_copy_path: - "provisioning" requirements_path: provisioning/requirements.ym .... .... platforms: - name: debian-stretch suites: - name: default verifier: name: busser ruby_bindir: '/usr/bin'
11. Верификация • http://serverspec.org/ ◦ ruby, rspec ◦ может проверять удаленный хост • https://www.inspec.io/ ◦ лучше чем rspec (по словам создателей) ◦ официально от chef ◦ умеет меньше • https://github.com/sstephenson/bats ◦ 100% shell ◦ давно не обновлялся (февраль 2016)
12. Пример Serverspec
13. Итог • Проверка инфраструктурного кода как шаг в CI • CI поверх CI • CI на CD • Больше уверенности • Релизы инфраструктурного кода • Ревью инфраструктурного кода • Больше инфраструктурного кода • Реже роняем сервера (но это не точно)
14. Пример из жизни: CM role/cookbook/module • Поддержка нескольких ОС • Вариации логики через параметры • Установка с нуля или обновление • CircleCI/TravisCI не смогут помочь с сервисами • Старые системы не поддерживают провиженеры • Нужно поднимать свой CI (не бросайте это дело)
15. Пример из жизни: CM role/cookbook/module
16. Пример из жизни: AWS AMI • Packer • Запускается VM • Устанавливается софт • Последним шагом проверяется целостность установки • Локальные провиженеры ◦ Ansible установлен локально ◦ Serverspec - тоже локально ◦ Проверка с локальной машины удаленной • Не прошла верификация, нет ami
17. Пример из жизни: AWS AMI
18. Вопросы? • Что значит без автоматизации инфраструктуры? • Часики-то тикают! • Что значит "не хочу" писать деплой скрипты, все хотят! • Деплоить нечем? Отговорки, дал бог Ansible даст и Stonic!