Viele Services, viel Komplexität

In diesem Vortrag werden einige der Herausforderungen, auf die wir bei der Einführung von Microservices und DevOps gestoßen sind präsentiert und die Lösungsstrategien, die wir zur Bewältigung dieser Herausforderung entwickelt haben, vorgestellt.

Der Talk wurde am 22. März 2018 im Rahmen des Treffens des GI-Arbeitskreises "Microservices & DevOps" in Aachen gehalten.

Transcript

1. Viele Services, viel Komplexität 3. Treffen des GI Arbeitskreises Microservices & DevOps Aachen, 22. März 2018 Dominik Sandjaja
2. 2 Über • Globale Hotelsuchplattform, gegründet 2005 • 400 Buchungsseiten, 1,8 Millionen Hotels in mehr als 190 Ländern • Über 727 Millionen Qualified Referrals (2017)
3. Wie es aussieht 3
4. Das aktuelle System
5. Die Reise eines Requests 5
6. 6 Was macht der MainService? • Zu jeder Anfrage: • Hotels in gewünschter Region suchen • Preise sammeln und verarbeiten • Ergebnisse filtern und sortieren • Technische Herausforderungen: • Performance • Datenmenge • Caching
7. Unser MainService 7
8. 8 Never change a running system? • Zuverlässig • Bekannter Code • Schnell
9. 9 Warum alles neu machen? • Neue Anforderungen an die Hotelsuche • Integration Stream-basierter Datenbasis • Firmenweiter Cloud-First-Ansatz
10. Monolith? Microservices?
11. 11 Warum wollen wir Microservices? • Unabhängige Skalierbarkeit • Leichter Wechsel von Zuständigkeiten • Ersetzen einzelner Funktionalitäten
12. 12 Warum können wir Microservices? • Funktionsumfang klar definiert in bekannter Domäne • Stateless, keine Transaktionen • Kafka-Streams und Stream-Processing vorhanden • Unterstützung durch Management
13. Microservices! … kommen mit eigenen Herausforderungen
14. Unsere Herausforderungen Werden wir die Vielzahl an neuen Technologien beherrschen? Können wir die Infrastruktur bewältigen? Schaffen wir es, die verschiedenen Teams zu integrieren? 14
15. 1. Herausforderung: Viele neue Technologien
16. Unser bisheriger Tech-Streichelzoo 16 MainService-Entwickler DB-Administratoren Systemadministratoren Performance Team Data Engineering
17. MainService-Team Unser neuer Technologie-Zoo 17
18. 18 Wie wir die Technologien gezähmt haben • Evaluation verschiedener Technologien • Unterstützung durch andere Teams • Strukturierter Wissensaustausch
19. 2. Herausforderung: Infrastructure as a Pain
20. 20 Unser Pain mit der Infrastruktur • Neue und unbekannte Technologien • Übergang von Verantwortlichkeiten • Logik in der Infrastruktur Bildquelle: http://www.myconfinedspace.com/2017/04/15/complicated-road-patterns/
21. 21 Infrastruktur - Painkillers • Gemeinsames Team aus Devs und Ops • Pair Programming • Interner und externer Wissensaustausch • MVP-Ansatz mit viel Trial and Error
22. 3. Herausforderung: Team-Integration
23. Devs-Team + Ops-Team = DevOps-Team? • Unterschiedliche Arbeitsweisen • Zuordnung von Verantwortlichkeiten • Fehlender Fokus 23
24. Gelebte Team-Integration • Zusammensitzen • Gemeinsame: • Zieldefinitionen • Lösungssuchen • Retrospektiven • Individuelle Prozesse 24
25. Erkenntnisse
26. 26 Power of Proof • 2 PO und Scrum Master • 3 Ops • 5 Devs • > 10 Services • < 30 Minuten Time to Repair • < 200 ms Responsezeit • > 350 Deployments in 8 Wochen
27. Wurden die Herausforderungen gemeistert? Werden wir die Vielzahl an neuen Technologien beherrschen? Können wir die Infrastruktur bewältigen? Schaffen wir es, die verschiedenen Teams zu integrieren? 27
28. 28 Es ist nicht alles Gold ... • Wissenstransfer funktioniert nicht immer • Fehlersuche und Debugging ist schwierig • Komplexität der Infrastruktur nimmt zu • Viele Best Practices noch nicht realisiert
29. Vielen Dank! E-Mail: dominik.sandjaja@trivago.com Software Engineer Düsseldorf Dominik Sandjaja