Experimente & Tools: Wie man sich in diesem Dschungel zurechtfindet

You've lined up everything for your experiment: type of experiment, hypotheses & success criteria, team & time - but how to get started now? How to pick the right tools to actually build, run and evaluate the experiment?
In this talk, I'll help you pick the best tools for your user research & prototyping experiments. I'll share what we learned from running experiments - and going through the test-fail-learn cycle with our tool choices numerous times.

Transcript

1. Experimente & Tools:
   Wie man sich in diesem Dschungel zurechtfindet
   Thomas Leitermann
   Product Manager
   MTP Engage Hamburg 24.05.2019
   @thomasleiterman
   

   View Slide

2. View Slide

3. Voraussetzungen
   3
   

   View Slide

4. © Business Model Foundry AG
   Ziel & Zielerreichung
   festlegen
   4
   Hypothese
   Experiment
   Metrik
   Kriterium
   User unsere Value Proposition
   so wert schätzen, dass sie dafür
   bezahlen.
   eine Payment-
   Schranke nach Beispielfragen
   einbauen.
   wie sich die Konversionsrate
   zum Kauf darstellt.
   Wir sind bei …
   … 3% mega begeistert.
   … 1,3% einverstanden.
   … 0,5% enttäuscht.
   Ansatzpunkt
   Messung
   Erfolgszustand
   „Pflanzen lesen“-App
   

   View Slide

5. › Generierend oder Evaluierend?
   › Beweiskraft versus Zeitaufwand
   Typ des Experiments
   5
   

   View Slide

6. Angelehnt an „The Real Startup Book“, www.realstartupbook.com
   Generierendes oder Evaluierendes Experiment?
   7
   Markt Produkt
   Fragestellung Methode Fragestellung Methode
   Generierend
   Kunde
    Discovery Interview
    Ethnographie
    Umfragen,
   Fokusgruppen
   Problem
    Solution-Interview
    Ethnographie
    Concierge-Test
    Demo Pitch
   Evaluierend
   Umsatz
    Landing Page-Test
    Sales Pitch &
   Pre-Sales
    Fake door
    5-second test
    Flyer
   Lösung
    Prototypen (Papier,
   Clickdummy)
    Wizard of Oz
    Analytics
    Usability Test
    Fertiges Produkt
   

   View Slide

7. Angelehnt an A.Osterwalder, Strategyzer (https://blog.strategyzer.com/posts/2017/3/21/how-strong-is-your-innovation-evidence)
   Beweiskraft vs. Zeitaufwand
   8
   Hohe
   Beweiskraft
   Niedrige
   Beweiskraft
   Geringer
   Zeitaufwand
   Großer
   Zeitaufwand
   Landing-Page-Test
   Wizard of Oz
   Concierge
   Pre-Sales
   Validation Interview
   Discovery Interview
   Crowdfunding
   

   View Slide

8. Voraussetzungen für Experiment erfüllt?
    Testkarte: Hypothese, Metrik, Erfolgskriterium
    Experimenttyp festgelegt
    Budget (Team, Zeit, Geld) eingeholt
   9
   

   View Slide

9. Learnings
   10
   

   View Slide

10. Du bist nicht der User!
    11
    Slider
    Augmented
    Reality-
    Feature
    

    View Slide

11. Automatisiere die Rekrutierung für User Research
    12
    Finden Setup
    Terminieren
    Akquirieren
    

    View Slide

12. Je einfacher, desto besser
    13
    

    View Slide

13. Je einfacher, desto besser
    14
    

    View Slide

14. Je einfacher, desto besser
    15
    

    View Slide

15. Teste deine Test-Tools
    16
    

    View Slide

16. Iteriere auch im Experiment
    17
    18 – 9 Uhr
    Werbung live
    9 - 11 Uhr
    Analyse der
    Replays & Daten
    11 - 12 Uhr
    Review & Planning
    12 - 17 Uhr
    Änderungen & Erweiterungen
    texten, designen, einbauen
    17 - 18 Uhr
    QA & Bugfixing
    

    View Slide

17. 18
    v1
    v2
    v3
    

    View Slide

18. Learnings um sich im Dschungel zurechtzufinden
     Überprüfbare Hypothese formuliert
     Experimenttyp festgelegt
     Budget eingeholt
    › Du bist nicht der User
    › Automatisiere die Rekrutierung für User Research
    › Je einfacher, desto besser
    › Teste deine Test-Tools
    › Itereriere auch im Experiment
    19
    

    View Slide

19. 20
    Payment
    A/B-Testing
    Prototyping
    Analytics
    Page Builder
    Social Media
    Werbung
    Formulare
    Automatisierung
    Terminierung
    Organisation
    

    View Slide

20. Vielen Dank
    Thomas Leitermann
    Product Manager
    @thomasleiterman
    inovex GmbH
    blog.inovex.de
    www.inovex.de
    

    View Slide