Tarefas assíncronas com django e celery

Slide 1

Slide 1 text

TAREFAS ASSÍNCRONAS COM DJANGO E CELERY Allisson Azevedo Monday, June 10, 13

Slide 2

Slide 2 text

ALLISSON AZEVEDO Graduado em Licenciatura em Computação Desenvolvedor Web http://speakerdeck.com/allisson http://slideshare.net/allisson http://github.com/allisson http://youtube.com/user/allissonazevedo Monday, June 10, 13

Slide 3

Slide 3 text

Monday, June 10, 13

Slide 4

Slide 4 text

Monday, June 10, 13

Slide 5

Slide 5 text

PORQUE EU PRECISO DE UM TASK/JOB QUEUE? Necessidade de processar uma tarefa fora do ciclo de requisição e reposta Processamento de vídeo/imagens Envio de e-mails Geração de relatórios complexos Comunicação com API’s externas (twitter, facebook) Monday, June 10, 13

Slide 6

Slide 6 text

PORQUE EU PRECISO DE UM TASK/JOB QUEUE? Agendar tarefas (substituir o cron) Trabalhar com indexação de um search engine Monday, June 10, 13

Slide 7

Slide 7 text

COMO FUNCIONA? Client Quem gera a tarefa Message Broker Gerencia a ﬁla de tarefas Worker Recebe as tarefas do Broker e executa as mesmas Monday, June 10, 13

Slide 8

Slide 8 text

COMO FUNCIONA? Result Store Onde são guardados os resultados das tarefas Monday, June 10, 13

Slide 9

Slide 9 text

CELERY “Distributed Task Queue” Escrito em python Integração com os principais frameworks python (django, pyramid, ﬂask, web2py, tornado) Broker Backends (rabbitmq, redis, sqlalchemy, django, mongodb) Result Store Backends (Redis, memcached, MongoDB) Monday, June 10, 13

Slide 10

Slide 10 text

QUAL BROKER USAR? RabbitMQ (http://stackoverﬂow.com/a/9176046) Redis Não use o broker como result store Monday, June 10, 13

Slide 11

Slide 11 text

INTEGRANDO COM O DJANGO pip install django-celery Adicione o djcelery no INSTALLED_APPS Adicione as linhas no settings.py import djcelery djcelery.setup_loader() Monday, June 10, 13

Slide 12

Slide 12 text

INTEGRANDO COM O DJANGO Selecione o broker BROKER_URL = 'redis://localhost:6379/0' #Redis Inicie o worker python manage.py celery worker --loglevel=info Monday, June 10, 13

Slide 13

Slide 13 text

INTEGRANDO COM O DJANGO Em seus projetos, crie um arquivo chamado tasks.py Monday, June 10, 13

Slide 14

Slide 14 text

INTEGRANDO COM O DJANGO from celery import task @task() def add(x, y): return x + y Monday, June 10, 13

Slide 15

Slide 15 text

INTEGRANDO COM O DJANGO Rode a task Monday, June 10, 13

Slide 16

Slide 16 text

INTEGRANDO COM O DJANGO >>> from celerytest.tasks import add >>> add.delay(2, 2) >>> add.apply_async((2, 2)) Monday, June 10, 13

Slide 17

Slide 17 text

MÃO NA MASSA! https://github.com/allisson/django-social-monitor- example Monday, June 10, 13