Open Source Logging- & Monitoring Tools (JAX2017)

A whirlwind tour through our set of open source monitoring and logging tools like Graylog, Graphite, Grafana, Logstash and Collectd.

Transcript

1. Torsten Bøgh Köster | torsten.koester@s24.com | @tboeghk | developer.s24.com Open-Source Logging- & Monitoring-Tools
2. @tboeghk @tboeghk #cto, Search Technology Meetup Hamburg, #ansible, #roadbike, #landscapephotography Torsten Bøgh Köster | torsten.koester@s24.com | @tboeghk | developer.s24.com
3. Bester Arbeitgeber Deutschlands im Handel und Konsum laut Arbeitgeber-Ranking Produktsuche. 60M Produkte. 2k Bilder/Sek. 1k Suchen/Sek. Torsten Bøgh Köster | torsten.koester@s24.com | @tboeghk | developer.s24.com
4. Open Source Power Delivered.
5. Anwendungsmonitoring
6. Kommerzielle Lösungen: schnell implementiert, effizient …
8. one size fits all?
9. business metric gap
10. teuer
11. Step back.
12. Akteur: Entwickler
13. Business-Metriken Business Business
14. root cause analysis
15. Schema: Analysepunkte der Anwendung Zugriffe Anwendungslogs Interner Zustand? Zugriff via JMX? 
 Metriken? Durchsatz? Platte? IOPS? CPU? Network?
16. Schema: Monitoring
17. hands on
21. Sentry: Integration via Log4j Appender
23. „vintage“
26. an old man’s time series data store
28. dropwizard-metrics
29. JMX
32. Logstash: a regex monster
34. Always buffer your logs! String parsing into json separate app for user agent parsing & geo-ip Obfuscation
36. Graylog: Overview
37. Graylog: Details
42. Other talks today by @tboeghk Modern Data Structures @shopping24 | @tboeghk | developer.s24.com yes, we’re hiring! Torsten Bøgh Köster | torsten.koester@s24.com | @tboeghk | developer.s24.com Bester Arbeitgeber Deutschlands im Handel und Konsum laut Arbeitgeber-Ranking