Building Continuous Delivery - DevOps Way

Transcript

1. Building deployment pipeline: DevOps way Андрей Ребров Инженерный тренер ScrumTrek
3. Continuous Deployment - Ожидание
4. Continuous Deployment - Реальность
5. Инструменты разработки != инструменты админов
6. Недоверие Ops к Dev
7. «Прохладные истории» сломанных стендов
8. Решение •  Обеспечить прозрачность процесса •  Обеспечить качество поставок •  Свести dev и ops в одном месте
9. Delivery Pipeline – наш выбор
10. Это тоже delivery pipeline
12. Culture Automation Measurement Sharing
13. Culture
14. Automation •  CI Server •  Code Analysis •  Auto Tests •  Configuration Management
15. CI Server •  Рассмотрим на примере Jenkins
16. Что нужно 1.  Ставим pipeline plugin 2.  Делаем dependency между задачами 3.  Создаем новый pipeline view 4.  …. 5.  Profit!
17. Альтернативы
18. Configuration Management •  VM control •  OS control •  Installation control •  …
19. Как неправильно
20. Например
21. Vagrant Vagrant::Config.run do |config| config.vm.box = "precise32" config.vm.box_url = http://files.vagrantup.com/precise32.box config.vm.network :hostonly, "192.168.33.10” config.vm.share_folder("v-web", "/vagrant/www", "./www", :nfs => true) config.vm.share_folder("v-db", "/vagrant/db", "./db", :nfs => true) config.vm.forward_port 80, 8080 config.vm.provision :shell, :inline => "apt-get update --fix- missing” end
22. Docker from ubuntu:12.10 run apt-get update run DEBIAN_FRONTEND=noninteractive apt-get install -q -y python run DEBIAN_FRONTEND=noninteractive apt-get install -q -y python-pip run pip install django run DEBIAN_FRONTEND=noninteractive apt-get install -q -y curl run curl -L https://github.com/shykes/helloflask/archive/ master.tar.gz | tar -xzv run cd helloflask-master && pip install -r requirements.txt
23. Нужно больше инструментов!
24. Еще больше!
26. Что важно •  Useful reports •  Useful logging •  Vizualisation – Dashboards – Graphs – …
27. Работаем с логами
28. Node    Node   Logstash   Elas.cSearch   Kibana   Как можно все это собрать
29. Запуск Lumberjack /opt/lumberjack/bin/lumberjack -- host your.logstash.host -- port port-for- these-logs --ssl-ca-path /etc/ssl/ logstash.pub Для генерации ключей на logstash сервере: openssl req -x509 -newkey rsa:2048 -keyout /etc/ ssl/ logstash.key -out /etc/ssl/logstash.pub - nodes -days 365
30. Конфигурируем Logstash #1 input { lumberjack { type => "apache-access" port => 3338 ssl_certificate => "/etc/ssl/logstash.pub" ssl_key => "/etc/ssl/logstash.key" } }
31. Конфигурируем Logstash #2 filter { date { type => "apache-access" timestamp => "dd/MMM/yyyy:HH:mm:ss Z" } }
32. Конфигурируем Logstash #3 output { elasticsearch { embedded => false cluster => logs host => "172.28.2.2" index => "apache-%{+YYYY.MM}" type => "apache-access" } }
33. Запуск Logstash /usr/bin/java -jar /opt/logstash/logstash.jar agent -f <path-to- your.conf> -l <path-to-where-you-want-the.log>
34. Конфигурируем Elasticsearch cluster.name: logs index.number_of_replicas: 0 path.data: /elasticsearch/data path.work: /elasticsearch/work path.logs: /elasticsearch/logs bootstrap.mlockall: true discovery.zen.ping.multicast.enabled: false
35. Запускаем Elasticsearch ./bin/elasticsearch –f или в фоне ./bin/elasticsearch
36. Запускаем Kibana ruby kibana.rb
37. Визуализация
38. Что есть на рынке
39. Graphite output { graphite { host => "10.10.10.10" port => 2003 type => "system-netstats" metrics => [ hosts.%{@source_host}.netstats.interfaces.%{iface}.rxpck_s, "%{rxpck_s}”] } }
40. Что на выходе
41. Twitter @andrebrov E-mail arebrov@scrumtrek.ru Skype rebrov.andrey Вопросы?