Von Continuous Deployment zu Microservices

Die technische Geschichte hinter EUROPACE2 - Architektur, Build, Testen, Deployment, Entwicklungsprinzipien.

Transcript

1. Von Continuous Deployment zu Microservices Jörg Pfründer @joergpfruender EUROPACE AG / HYPOPORT AG
2. EUROPACE
3. EUROPACE
4. EUROPACE
5. EUROPACE ca. 15 – 20 % Marktanteil in Deutschland ca. 2,5 Mrd. Euro/Monat
6. Migrationsprojekt
7. Anforderungen Verschiedene Module
8. Anforderungen Verschiedene Module Continuous Deployment
9. Anforderungen Verschiedene Module Continuous Deployment ca. 10 – 10 LoC ⁵ ⁷
10. Start Monolith
11. Unsere Deployment Pipeline
12. Klassische Testpyramide
13. Integrationstiefe Anzahl der Tests
14. Unsere Testpyramide
15. Persistenz
16. Version Update Altes Schema: Version 27 { "id" : 9586729475, "version" : "345", "modelVersion" : "27", "firstname" : "John", "surname" : "Doe", "street" : "Klosterstraße" "number" : "71" "zip" : "10279" "city" : "Berlin" }
17. Version Update Neues Schema: Version 28 { "id" : 9586729475, "version" : "345", "modelVersion" : "28", "firstname" : "John", "surname" : "Doe", "address" : { "street" : "Klosterstraße" "number" : "71" "zip" : "10279" "city" : "Berlin" } }
18. VersionConverter DBObject address = new DBObject(); address.put("street", dbObjectRoot.get("street")); address.put("number", dbObjectRoot.get("number")); address.put("zip", dbObjectRoot.get("zip")); address.put("city", dbObjectRoot.get("city")); dbObjectRoot.put("address", address));
19. VersionConverter • migriert das Modell immer von Version n auf Version n+1 • Mehrere VersionConverter können kombiniert werden • Lazy Conversion vs. Batch Conversion
20. Build wird langsam
22. github.com/hypoport/milk-maven-plugin
23. Incremental Build
24. Incremental Build
26. Neues Team und neues Modul
27. Microservices
28. Microservices Schnelleres Entwickeln → → Deployment → Feedback → Bugfixing
29. v3 v4 v2 v7 Problem: Versionierung & CD
30. Problem: Versionierung & CD ? μ-Service A μ-Service B μ-Service C μ-Service D
31. Das Zusammenspiel testen Service Provider Consumer μ-Service
32. Benutze die Client Implementierung für Tests: Consumer Driven Tests in einer Consumer Driven Test Suite (CDTS) Contract Tests
33. Consumer μ-Service Service Provider Consumer Driven Test Suite
34. CDTS in der Deployment Pipeline
35. Nur ZWEI Versionen 1. Produktive Version 2. Neue Version -> KEIN Versionsmanagement!
36. Keine Breaking Changes! 1. Altes Schema { "id" : 9586729475, "firstname" : "John", "surname" : "Doe", "name" : "John Doe" }
37. Keine Breaking Changes 1. Altes Schema 2. Kompatibilitätsversion die sowohl altes als auch neues Schema unterstützt { "id" : 9586729475, "firstname" : "John", "surname" : "Doe", "name" : "John Doe", "displayName" : "John Doe" }
38. Keine Breaking Changes 1. Altes Schema 2.Kompatibilitätsversion die sowohl altes als auch neues Schema unterstützt 3.Neues Schema { "id" : 9586729475, "firstname" : "John", "surname" : "Doe", "name" : "John Doe", "displayName" : "John Doe" }
39. Die Pipeline ist aber zu langsam!
40. Parallelisierung
42. Was haben uns Microservices bisher gebracht? - schellere Turnaroundzeiten - neue Technologien ausprobieren
44. Diamond Dependencies B C lib A
46. • Persistenz soll schnelle Änderungen unterstützen • Incremental Build hilft, aber nicht so viel, wie nötig • Andere Teams müssen ihre eigenen Lösungen finden • Consumer Driven Tests statt Komplettintegrationstests • Geht‘s noch einfacher? • Leicht und schnell – kann auf lange Sicht Probleme ergeben • Replaceability statt Reuse: kein „Utils“-Keller! • Das wichtigste: Was dem Kunden hilft!
47. Zum Weiterdenken... • Mike Cohn: http://www.mountaingoatsoftware.com/blog/the-forgotten- layer-of-the-test-automation-pyramid • J.B. Rainsberger: Integration Tests Are a Scam http://www.infoq.com/presentations/integration-tests-scam • Ian Robinson: Consumer-Driven Contracts: A Service Evolution Pattern http://martinfowler.com/articles/consumerDrivenContracts.html • Brandon Byars: Enterprise Integration Using REST http://martinfowler.com/articles/enterpriseREST.html • Sam Newman: Building Microservices • Uwe Friedrichsen: The Broken Promise of Reuse https://blog.codecentric.de/en/2015/10/the-broken-promise-of-re- use/ • Russ Olsen: To the Moon! https://www.youtube.com/watch? v=4Sso4HtvJsw