Einführung zu Supervisord (PyGraz)

Transcript

1. supervisord Ein Prozess-Manager +Horst Gutmann
2. Was ist supervisord? • Init Daemon ähnlich wie init.d und upstart • Pure Python • Linux, OSX, FreeBSD und Solaris o!ziell unterstützt • BSD-ähnliche Lizenz
3. Init Daemon? • Automatischen Starten und Stoppen von Prozessen • Überwachung, ob der Prozess noch läuft • Verbreitete Systeme: sysvinit, upstart, launchd, ...
4. Warum etwas Neues? • Man muss nicht für jeden Prozess eine eigene separate Con"g anlegen (sysinitv, upstart, ...) • Prozesse werden als Child-Prozesse verwaltet, wodurch PID-Files nur mehr in Ausnahmefällen benötigt werden. • Ganz normale Anwendung, die auch von ganz normalen Usern ausgeführt werden kann.
5. Warum etwas Neues? • Webinterface, über das das Status von Prozessen angezeigt und geändert werden kann. • XML-RPC-API • stdout-Logging • Eine Lösung, die auf jedem Unix-System laufen sollte
6. Beispiel-Prozesse
7. [program:pygraz] command  =  /srv/www/.../manage.py ↳  run_gunicorn  127.0.0.1:9012 directory  =  /srv/www/.../ priority  =  20 Prozess der PyGraz-Webapp > supervisorctl start pygraz
8. [program:workers] command=... priority=19 #  ... numprocs=5 process_name=%(process_name)s_ ↳%(process_num) Mehrere Worker mit einer Config
9. [group:jobmgmt] programs=celeryd,workers Gruppe für Job-Queue
10. MultiSite-Mgmt
11. Groups • Eine Supervisord-Instanz für alles • Bei ähnlichen Tools dann künstliche [program]- Namen notwendig • Start und Stop von Sites über Groups
12. Supervisord pro Site • Jede Site hat eine eigene Supervisord-Instanz • Erlaubt eigenen User pro Site und damit einfacheres Restarting bei Deployments • Saubere Programmnamen möglich • Installation in eigener venv oder global mit separaten Con"g-Files
13. pygraz.org & de.pycon.org • Mehrere Con"gs mit Installation global bzw. venv (de.pycon.org) • def start_server(): with pre"x(env_pre"x): run('supervisorctl -c {0}/supervisord.conf‘ ‘start pygraz'.format(env.cwd)) Look Ma, No sudo! • Jede Instanz dann mit upstart verwaltet.
14. de.pycon.org • /srv/pyconde/env_pyconde_2012/supervisord.conf • Supervisord installiert in venv, damit supervisorctl-Befehl im richtigen Kontext ausgeführt wird. • sysvinit-Script zum Starten des supervisord
15. Personal Daemons
16. Personal Daemons • Einzelne Benutzer können Crontabs haben, aber keine Managed-Processes • Mit Supervisord natürlich auch möglich :-) • Zum Beispiel für einfache Webservices eine Option
17. Circus? http://pypi.python.org/pypi/circus http://circus.io/