[DE] Smoke Tests mit dem Magento Test Automation Framework

02/2013 Magento Meetup Aachen

Transcript

1. code4business Software GmbH | Dennewartstr. 25-27 | 52068 Aachen | Germany Smoke Tests mit dem Magento Test Automation Framework Fabian Schmengler
2. © code4business 2013 www.code4business.de TAF – was ist das eigentlich? Test-Framework Erweiterung der PHPUnit_Selenium Extension für Magento Abstraktion des User Interfaces Test Suite Tests für Magento-Standard- Funktionalität 15-20 Stunden Gesamtlaufzeit Regressionstest Standard-Fixtures Helper für Standard-Aktionen
3. © code4business 2013 www.code4business.de Erste Schritte: Einrichtung der Testumgebung Bestandteile: Testumgebung: PHPUnit, Test Framework Tests: Test Cases, Form Data, UI Maps Test-Server: Selenium, Browser System under Test (SUT): Magento Installations-Hilfe:  http://www.matthias-zeis.com/archiv/magento-test-automation-framework-taf  http://www.dhmedia.com.au/blog/how-install-and-run-magento-test-automation-framework
4. © code4business 2013 www.code4business.de Konzepte des Frameworks Abstraktion des User Interface: UI Maps YAML-Dateien UI Map bildet interne (in den Tests genutzte) Namen von Seiten und Elementen auf URLs und Identifier ab Form-basierte Testdaten YAML-Dateien Werden in Formulare übertragen
5. © code4business 2013 www.code4business.de Die Standard Test Suite 1567 Tests 15 Stunden Gesamtlaufzeit UI Maps für Standard Installation Test der PayPal-Integration Jeder Test legt benötigte Test-Daten zu Fuß im Backend an  /!\ Failures mit Standard-Installation CE 1.7.0.2 DEMO
6. © code4business 2013 www.code4business.de Smoke Test Suite: Eigenschaften Ziel: Aufdecken von schwerwiegenden Bugs Kurze Laufzeit Lange Lebensdauer Hohe Pfadabdeckung von Support Code Kein Test von Feature Code => Unit Tests und Acceptance Tests An automated test’s value is mostly unrelated to the specific purpose for which it was written. It’s the accidental things that count: the untargeted bugs that it finds. [Marick98] “ ”
7. © code4business 2013 www.code4business.de Smoke Test Suite: Testpfade (Beispiel) Systemkritische Funktionalität: Finde Produkt(e) Bestelle Produkt(e) Totalausfall einer Komponente wird schnell erkannt  wenige Minuten! Navigation Produkt-Ansicht Checkout Versand Zahlung Suche Configurable OPC Gast Simple OPC Register Vorkasse Festpreis Virtual OPC Login Kostenlos Grouped Multi Login Nachnahme Layered Navigation Bundle Multi Register Kategorien PayPal Table Rate
8. © code4business 2013 www.code4business.de Smoke Test Suite: Testpfade im Vergleich zur Standard Test Suite Navigation Produkt-Ansicht Checkout Versand Zahlung Suche Kategorien Layered Navigation Grouped Bundle Configurable Simple Virtual Table Rate Festpreis Kostenlos Nachnahme Vorkasse PayPal Multi Login Multi Register OPC Gast OPC Register OPC Login Navigation Produkt-Ansicht Checkout Versand Zahlung Suche Configurable OPC Gast Simple OPC Register Vorkasse Festpreis Virtual OPC Login Kostenlos Grouped Multi Login Nachnahme Layered Navigation Bundle Multi Register Kategorien PayPal Table Rate
9. © code4business 2013 www.code4business.de Smoke Test Suite: Proof of Concept Aus Standard Test Suite: UI Maps Fixtures Helpers Je Pfad ein Test Case mit voneinander abhängigen Tests DEMO
10. © code4business 2013 www.code4business.de Wie geht es weiter? Test-Daten je Suite programmatisch anlegen Daten via Selenium im Backend anlegen ist langsam Backend hat für Smoke Tests niedrige Priorität Daten müssen nicht für jeden Test einzeln angelegt werden Smoke Test Suite projektübergreifend einsetzen Ggf. einzelne UI Maps überschreiben Automatische Ausführung mit Continuous Integration
11. © code4business 2013 www.code4business.de Danke für die Aufmerksamkeit Fragen?