Monitoramento de Tarefas Assíncronas

Palestra sobre Monitoramento de Tarefas Assíncronas (como cron tasks) realizada no encontro do grupo FoR (Frevo On Rails) de Recife - PE

Transcript

6. Web App Worker Processe esta imagem! Beleza! Tchau! Usuário Upload OK Tarefa Assíncrona Não Periódica
7. Web App Worker Processe esta imagem! Beleza! Tchau! Usuário Upload OK DJ Resque Sidekiq
9. Scheduler Script Execute! Beleza! Tchau! Tarefa Assíncrona Periódica
10. Scheduler Script Execute! Beleza! Tchau! Cron Launchd BASH Ruby
11. 1. Erros 2. Lentidão 3. Não execução Preocupações
12. Três Passos para o Controle
13. Log Everything! (1)
14. Log Everything! 1.  Log separado por tarefa 2.  Log contendo STDOUT e STDERR (No caso de comandos ou scripts bash) 3.  Rotacionar os logs
15. Notifique Tudo de Anormal (2)
16. Airbrake Sentry Rollbar HoneyBadger
17. Mantenha Visível (3)
18. https://builds.apache.org/ JENKINS
19. Let’s Go!
20. Cron * * * * * /path/to/script.sh Dia da semana (0-6) (Dom = 0) Mês (1-12) Dia do mês (1-31) Hora (0-23) Minuto (0-59)
21. Whenever every 3.hours do! runner "MyModel.some_process"! rake "my:rake:task"! command "/usr/bin/the_script"! end! schedule.rb
23. Dead Man’s Snitch
24. set :job_template, "#{job_template} && curl :url"! ! every 1.day, :at => ['0:00am'] do! rake “my:task", :url => ”dms5.com/3231412"! end! schedule.rb Placeholder Replacement
25. 0 0 * * * /bin/bash -l -c 'cd /path/to && RAILS_ENV=production bundle exec rake my:task --silent' && Crontab curl dms5.com/3231412
26. Dead Man’s Snitch 1.  URL por Tarefa 2.  Log to Hell (your_command &> /dev/null) 3.  Pago ($19/100 tasks/mês)
27. Dead Man’s Snitch 1.  Log: Ruim 2.  Notificação: Regular 3.  Dashboard: Regular
30. Amazon EC2 micro $ sudo wget -O /etc/yum.repos.d/jenkins.repo http://../jenkins.repo $ sudo rpm --import http://..jenkins-ci.org.key $ sudo yum install jenkins $ sudo service jenkins start
31. Amazon EC2 micro
32. set :jenkins_home, "http://jenkins-instance- url:8080"! ! set :job_template, ”JENKINS_HOME=#{jenkins_home}! /bin/jenkins_core.jar ‘:id’ #{job_template}"! ! every 1.day, :at => ['0:00am'] do! rake “my:task", :id => ”MyTask"! end! schedule.rb Placeholder Replacement
33. 0 0 * * * /bin/bash -l -c JENKINS_HOME=http://jenkins-instance..:8080 /bin/jenkins_core.jar “MyTask” 'cd /path/to && RAILS_ENV=production bundle exec rake my:task –silent’ Crontab
34. Jenkins 1.  Log: Ótimo 2.  Notificação: Ruim 3.  Dashboard: Ótimo
37. Amazon EC2 micro $ gem install octavarium $ octavarium server start
38. Octavarium::Whenever.init(self, ! { :server_url => "http://oct3.com",! :group_name => "Ads" })! ! every 1.day, :at => ['0:00am'] do! rake “my:task”! end! schedule.rb
39. Octavarium 1.  Log: Ótimo 2.  Notificação: Ótimo 3.  Dashboard: Wow!
40. Roadmap 1.  Configurações de notificação avançadas por tarefa 2.  Sistema de Autenticação 3.  Tutoriais e documentação completa
41. Obrigado! Lançamento 15/08/2014 github.com/tonidas/octavarium