De desarrollo a Producción con Docker

Presentación sobre Docker dada en RubyConfAr 2014

Transcript

1. Desarrollo y Producción con Docker
3. Mi nombre es Patricio Bruna (@pbruna) www.itlinux.cl No soy un desarrollador DevOps
4. Que hacemos?
6. VMware / Amazon / GTD S3 (Ceph) MySQLs…. HAProxy Varnish Cache
7. Como llegamos a utlizar Docker y que tiene que ver con Ruby
8. Necesitábamos automatizar la contabilidad.
9. Voy a programar algo en 3 meses pero creo que no debería usar Perl ni Bash
10. 3 meses después
12. Lecciones del deploy • Ruby 1.8.2? • Debo usar RVM!!! • RVM ya no la lleva, ahora es RBENV/CHRUBY • Puppet no lo hace más fácil • Estoy haciendo el Deploy en CentOS 6, pero • CentOS 7 está por salir… ¿todo de nuevo? • Cómo escalará? - Porque así pensamos • Yosemite!!! —- Ahora ni en dev funciona
13. Sólo quería algo como esto $ apt-get install my-fck-app my-fck-app [##############] 100% $ _
14. Docker, Containers, and the Future of Application Delivery Why docker | OSCON 2013 by Docker http://www.slideshare.net/dotCloud/why-docker2bisv4
15. ¿Qué es Docker? “Docker es a LXC ORM es a SQL by Patricio Bruna
16. Matrix from Hell
17. Dockerizar all the things!!!
18. ¿Por qué Docker? • Boostraps más rápidos para nuestros productos • Entornos de desarrollo realmente portables • Mucho, pero mucho más liviano que una VM • Si funciona en desarrollo, funciona en producción
19. Como uso Docker Linux $ yum install docker $ apt-get install docker Mac OS X y Windows (si también Windows) https://github.com/boot2docker/boot2docker
20. Docker API REST docker se comunica con su API REST $  docker  info   Containers:  41   Images:  192   Storage  Driver:  aufs    Root  Dir:  /mnt/sda1/var/lib/docker/aufs    Dirs:  274   Execution  Driver:  native-­‐0.2   ...   Sockets:  [unix:///var/run/docker.sock  tcp://0.0.0.0:2375]   Username:  pbruna   Registry:  [https://index.docker.io/v1/]   $  _ https://docs.docker.com/reference/api/docker_remote_api_v1.15/
21. Docker API REST docker se comunica con su API REST $  curl  -­‐X  GET  http://192.168.59.103:2375/info   {"Containers":37,"Debug":1,"Driver":"aufs","DriverStatus": [["Root  Dir”,"/mnt/sda1/var/lib/docker/aufs"], ["Dirs","212"]],"ExecutionDriver":"native-­‐0.2","IPv4Forwar ding":1,"Images":138,"IndexServerAddress":"https:// index.docker.io/v1/","InitPath":"/usr/local/bin/ docker","InitSha1":"","KernelVersion":"3.15.3-­‐ tinycore64","MemoryLimit":1,"NEventsListener":0,"NFd": 11,"NGoroutines":10,"Sockets":["unix:///var/run/ docker.sock","tcp://0.0.0.0:2375"],"SwapLimit":1}   $  _ https://docs.docker.com/reference/api/docker_remote_api_v1.15/
22. No se suponía que veríamos desarrollo y deploy
23. Mi flujo de trabajo con Docker y Rails
24. Mi flujo de trabajo con Docker 1. Seleccionar imagen base 2. Se personaliza la imagen (Fork): Dockerfile 3. Construimos la nueva imagen: docker build 4. Push de la imagen a Docker Hub 5. Dockerizo aplicación: Dockerfile 6. Construyo container (!= imagen) 7. Paso a producción
25. 1. Selecciono imagen base http://phusion.github.io/baseimage-docker/ http://hub.docker.com
26. 2. Fork de la imagen  1|  #  Mi  imagen  base  para  mis  aplicaciones  Rails  >=4    2|  FROM  phusion/passenger-­‐ruby21:0.9.14    3|  MAINTAINER  Patricio  Bruna  <pbruna@itlinux.cl>    4|    5|  #  Acceso  SSH  con  llave    6|  ADD  pbruna-­‐ssh-­‐key.pub  /tmp/your_key    7|  RUN  cat  /tmp/your_key  >  /root/.ssh/authorized_keys  &&  rm  -­‐f  /tmp/your_key    8|    9|  #  Instalamos  Rails  con  las  gems  que  mas  uso   10|  ADD  Gemfile  /home/app/   11|  ADD  Gemfile.lock  /home/app/   12|  WORKDIR  /home/app/   13|  RUN  bundle  install   14|   15|#  Clean  up  APT  when  done.   16|  RUN  apt-­‐get  clean  &&  rm  -­‐rf  /var/lib/apt/lists/*  /tmp/*  /var/tmp/* Cada orden genera un commit cada commit afecta el cache
27. 2. Fork de la imagen  1|  #  Mi  imagen  base  para  mis  aplicaciones  Rails  >=4    2|  FROM  phusion/passenger-­‐ruby21:0.9.14    3|  MAINTAINER  Patricio  Bruna  <pbruna@itlinux.cl>    4|    5|  #  Acceso  SSH  con  llave    6|  ADD  pbruna-­‐ssh-­‐key.pub  /tmp/your_key    7|  RUN  cat  /tmp/your_key  >  /root/.ssh/authorized_keys  &&  rm  -­‐f  /tmp/your_key    8|    9|  #  Instalamos  Rails  con  las  gems  que  mas  uso   10|  WORKDIR  /home/app/   11|  ADD  Gemfile  /home/app/   12|  ADD  Gemfile.lock  /home/app/   13|  ADD  .bashrc  /home/app/   14|   15|  RUN  bundle  install   16|#  Clean  up  APT  when  done.   17|  RUN  apt-­‐get  clean  &&  rm  -­‐rf  /var/lib/apt/lists/*  /tmp/*  /var/tmp/*
28. 2. Fork de la imagen  1|  #  Mi  imagen  base  para  mis  aplicaciones  Rails  >=4    2|  FROM  phusion/passenger-­‐ruby21:0.9.14    3|  MAINTAINER  Patricio  Bruna  <pbruna@itlinux.cl>    4|    5|  #  Acceso  SSH  con  llave    6|  ADD  pbruna-­‐ssh-­‐key.pub  /tmp/your_key    7|  RUN  cat  /tmp/your_key  >  /root/.ssh/authorized_keys  &&  rm  -­‐f  /tmp/your_key    8|    9|  #  Instalamos  Rails  con  las  gems  que  mas  uso   10|  WORKDIR  /home/app/   11|  ADD  Gemfile  /home/app/   12|  ADD  Gemfile.lock  /home/app/   13|  RUN  bundle  install   14|   15|  ADD  .bashrc  /home/app/   16|#  Clean  up  APT  when  done.   17|  RUN  apt-­‐get  clean  &&  rm  -­‐rf  /var/lib/apt/lists/*  /tmp/*  /var/tmp/*
29. 3. Construyo la imagen y la publico en el registry (hub.docker.com) [pbruna@home]  docker  build  -­‐t=“pbruna/rubyconfar-­‐rails:0.1”  .  
31. https://hub.docker.com
32. 5. Dockerizar la aplicación FROM  pbruna/rubyconfar-­‐rails   MAINTAINER  Patricio  Bruna  <pbruna@itlinux.cl>   RUN  rm  -­‐f  /etc/service/nginx/down   RUN  mkdir  -­‐p  /home/app/rubyconfar   RUN  mkdir  -­‐p  /etc/service/delayed_job   WORKDIR  /home/app/rubyconfar   ADD  Gemfile  /home/app/rubyconfar/   ADD  Gemfile.lock  /home/app/rubyconfar/   RUN  bundle  install   #  Aprovechamos  el  Cache  de  Docker   ADD  config/folio-­‐nginx.conf  /etc/nginx/sites-­‐enabled/rubyconfar-­‐nginx.conf   ADD  config/folio-­‐nginx-­‐env.conf  /etc/nginx/main.d/rubyconfar-­‐env.conf   ADD  scripts/delayed_job.sh  /etc/service/delayed_job/run   ADD  .  /home/app/rubyconfar   ENV  RAILS_ENV  production   RUN  rake  db:migrate   RUN  rake  db:seed   RUN  rake  tmp:create   RUN  chown  9999:9999  -­‐R  /home/app/rubyconfar   EXPOSE  80   CMD  ["/sbin/my_init"]
33. 5.1 Variables de Entorno #  /etc/nginx/main.d/folio-­‐nginx-­‐env.conf   env  APP_DB_HOST;   env  APP_DB_PORT;   env  APP_DB_DATABASE;   env  APP_DB_USERNAME;   env  APP_DB_PASSWORD;   env  RAILS_ENV=production; #  config/database.yml   production:      adapter:  mysql2      host:  <%=  ENV['APP_DB_HOST']  %>      port:  <%=  ENV['APP_DB_PORT']  ||  "3306"  %>      database:  <%=  ENV['APP_DB_DATABASE']  %>      username:  <%=  ENV['APP_DB_USERNAME']  %>      password:  <%=  ENV['APP_DB_PASSWORD']  %>
34. Demo time
35. Demo time
36. Ejecutar el contenedor [pbruna@home]  boot2docker  status   running   [pbruna@home]  docker  run  -­‐d  -­‐p  80:80  -­‐e  "APP_DB_HOST=IP_OTRAVM"  -­‐e   "APP_DB_DATABASE=rubyconfar"  -­‐e  "APP_DB_USERNAME=rubyconfar"  -­‐e   "APP_DB_PASSWORD=rubyconfar"  pbruna/rubyconfar   facf1576330dd6424a8bb37833bf9ff17844bdba2d813a6690ff59491c325e53   [pbruna@home]  curl  -­‐H  "Host:  docker.rubyconf.com.ar"  http://$DOCKER_IP_HOST/hello   Hola  a  todos!!   [pbruna@home]  docker  inspect  sharp_hawking  #  Nombre  del  momento   .  .  .   .  .  .   [pbruna@home]  docker  stop  sharp_hawking  #  nombre  del  momento   [pbruna@home]  cd  ~/tmp/  
37. Compartir el entorno [pbruna@home]  docker  save  pbruna/rubyconfar  |  pv  |  bzip2  -­‐  >  docker_rubyconfar.bz2   214MiB  0:00:28  [6,37MiB/s]  [                                                                <=>                                    ]   [pbruna@home]  ls  -­‐lh  docker_rubyconfar.bz2   -­‐rw-­‐r-­‐-­‐r-­‐-­‐    1  pbruna    staff        89M  19  oct  16:04  docker_rubyconfar.bz2   ...   ...   [pbruna@home]  bzcat  docker_rubyconfar.bz2  |  docker  load [pbruna@home]  docker  pull  pbruna/rubyconfar   [pbruna@home]  docker  run  -­‐p  80:80  pbruna/rubyconfar
38. Fig web:      build:  .      command:  python  app.py      links:        -­‐  db      ports:        -­‐  "8000:8000"   db:      image:  postgres FROM  python:2.7   ADD  .  /code   WORKDIR  /code   RUN  pip  install  -­‐r   requirements.txt
39. El BigBang paso a producción
40. CoreOS 01-03 docker - nginx-lb - folio - ccw - nagios - logstash - grafana/kibana S3 MySQL Master Mailgun
41. #  /etc/systemd/system/rubyconfar.service   [Unit]   Description=Ruby  Conf  AR  Docker  Example   After=docker.service   Requires=docker.service   [Service]   TimeoutStartSec=0   ExecStartPre=-­‐/usr/bin/docker  kill  rubyconfar-­‐01   ExecStartPre=-­‐/usr/bin/docker  rm  rubyconfar-­‐01   ExecStartPre=/usr/bin/docker  pull  rubyconfar   ExecStart=/usr/bin/docker  run  -­‐-­‐name  -­‐p  80:80  rubyconfar-­‐01  rubyconfar   [Install]   WantedBy=multi-­‐user.target AAASS [pbruna@coreOS-­‐01]  sudo  systemctl  enable  /etc/systemd/system/rubyconfar.service   [pbruna@coreOS-­‐01]  sudo  systemctl  start  rubyconfar.service   [pbruna@coreOS-­‐01]  journalctl  -­‐f  -­‐u  rubyconfar.service
42. Actualizaciones 1. [pbruna@dev] git push -u origin master 2. [pbruna@dev]docker build -t=“pbruna/rubyconfar:0.2” . 3. [pbruna@dev]docker tag 0f6e1da7eb37 pbruna/rubyconfar:latest 4. [pbruna@dev] docker push pbruna/rubyconfar 5. [pbruna@dev]ssh coreos-01 6. [pbruna@coreOS-01] sudo systemctl restart rubyconfar.service
44. Como lo estamos haciendo etcd Distributed key value store that provides the backbone of CoreOS clusters confd Manage local application configuration files using templates and data from etcd or consul fleet With fleet, you can treat your CoreOS cluster as if it shared a single init system. systemd CoreOS uses systemd as the core of its distributed init system, fleet
45. VMware / Amazon / GTD S3 (Ceph) MySQLs…. HAProxy Varnish Cache
46. PaaS: A la Heroku Flynn Dokku https://github.com/progrium/dokku/ mini-Heroku hecho en 100 líneas de Bash Usa los mismos Build-Packs
47. S.O. Especializados http://coreos.com/ http://www.projectatomic.io
48. Administración clusterhq.com panamax.io
49. Una cosa más https://www.docker.com/subscribe_newsletter/
50. Una cosa más
51. Gracias!!!!