Beatsnap B-Test Presentation

Transcript

1. Abschlusspräsentation „Beatsnap“ Avner Shahal, Jette Beißer, Lascha Sochadse, Fabian Zeier, Hoai Anh Nguyen
2. Agenda Rückblick: A-Test § Waveform, Tutorial, Implementierung B-Test § Fragestellung § Versuchsablauf § Stichprobe § Ergebnisse Zusammenfassung § Vergleich zum A-Test, Beantwortung der Fragestellung, Verbesserungsvorschläge 1 2 3 2
3. Rückblick: A-Test 3
4. Rückblick: A-Test 2 Gruppen Tutorial - Bildbearbeitungsscreen (“Waveform”) Wie war das nochmal? 4
5. Zusammenfassung der Ergebnisse aus A-Test: „Waveform“ § Vor allem Funktionserweiterung positiv bewertet § Gewünschte Funktionen § Filter/Rahmen/Sticker/Bilderreihenfolge ändern § Text Einfügen/Bildübergänge § Anzeigedauer einzelner Bilder verändern § Beschriftung der Icons unklar § Kombination Rhythmus-Musik unklar § Entdecken des vollen Funktionsumfangs schwierig → Tutorial erwünscht 5
6. Zusammenfassung der Ergebnisse aus A-Test: Tutorial § VPs nach Tutorial: Positivere Bewertung der App § Nach interaktivem Tutorial: beste Leistung in Aufgabenbearbeitung § Identifiziertes Verbesserungspotential ähnlich wie Gruppe “Waveform” § Veränderung der Bilderreihenfolge gewünscht § Benennung der Icons unklar 6
7. Implementierung Entwicklung einer neuen App-Version, in der viele Verbesserungsvorschläge integriert sind: § Klickbares Tutorial § Erweiterte Anzeige von Bildern und Musik § Bearbeitungsmodus für Bilder § Neue Bearbeitungsmöglichkeiten § Veränderte Beschriftungen der Icons 7
8. B-Test Waveform Tutorial 8
9. Fragestellungen 4 Fragestellungen Umsetzung 1. Rating-Tabelle (Funktionen und Bedienelemente), explorative Fragen 2. SUS, Vergleich der Rating-Ergebnisse zwischen beiden Gruppen, explorative Fragen 3. Explorative Fragen, Puzzle 4. Rating-Tabelle, konkrete explorative Fragen 1. Finden und verstehen die Nutzer die Funktionen der App? 2. Steigert das Tutorial die Anzahl gefundener Funktionen und unterstützt deren Verständnis? 3. Welche zusätzlichen Features / Menüs / Funktionen wünschen sich die Nutzer? 4. Spezifische Fragestellung: Wie interpretieren die Nutzer die Anzeige der Diashow-Dauer? 9 Vier ?
10. B-Test § 2 Versuchsgruppen à 5 VPs § Gruppe A: ohne Tutorial § Gruppe B: mit Tutorial § Gleicher Ablauf und gleiche Aufgaben bei beiden Gruppen § Einzige Unterscheidung: Tutorial vorhanden oder nicht § 1 offene Frage variiert (Tutorial hilfreich vs. wünschenswert) 10
11. Ablauf Einführung Instruktion „Lautes Denken“ Situation explorativ Tutorial 11
12. Explorative vs. Tutorial Gruppe Ohne Tutorial Mit Tutorial 12
13. Ablauf Einführung Instruktion „Lautes Denken“ Situation SUS Explorative Fragen Puzzle explorativ Tutorial 13
14. Stichprobe 7 3 Alter: Ø 22,10 Altersspanne: 13 - 31 10 Hast du davor bereits eine Diashow erstellt? 7 2 1 Hast du iPhone Nutzerfahrung? 7 3 nein mehrmals ja nein häufiger 14
15. Stichprobe 5 4 5 5 5 4 2 3 5 3 5 4 4 2 1 0 0 1 2 3 4 5 6 Smartphone iPhone Kamera Whatsapp Facebook Instagram Snapchat Pinterest Social Media Nutzung Tutorial Explorativ 15
16. Ergebnisse 16
17. Ergebnisse allgemein „Eine schnelle Möglichkeit eigene Bilder mit eigener Musik mit Freunden zu teilen“ § Design ästhetisch (5/10) § Bedienung als intuitiv empfunden (4/10) § Schnelles Ergebnis (3/10) 17
18. 1. Finden und verstehen die Nutzer die Funktionen der App? 18
19. Quantitative Ergebnisse – von allen 10 gefunden und klar Top 10/10 gefunden und klar 19
20. Ergebnisse – Bild- und Musikauswahl Top 10/10 gefunden und klar „Leitet gut durch den Prozess“ § „Multiauswahl“ verständlich § Bildauswahl einfach § Begrenzung der Bildanzahl unklar § Frust aufgrund entfernter Bilder im Projekt 20
21. Ergebnisse – Bildbearbeitung 1 0 3 0 3 2 3 3 1 1 1 0 1 2 1 4 1 3 1 0 1 2 3 4 5 6 Tutorial Explorativ Tutorial Explorativ Tutorial Explorativ Bildausschnitt ändern Zoom Drehen Anzahl VPs Bildbearbeitung nicht gefunden mit Hilfe gefunden § Bildbearbeitung - einfach! § Funktionen ohne Tutorial oft nicht gefunden § Problem bei Ausrichtung der Bilder § Fehlende Navigation in der Statusleiste 21
22. Ergebnisse – Bildbearbeitung 2 2 2 0 1 0 0 0 2 0 2 0 1 3 1 5 2 5 4 0 1 2 3 4 5 6 Tutorial Explorativ Tutorial Explorativ Tutorial Explorativ Bildreihenfolge ändern Übergang - Funktion Übergang - Menü Anzahl VPs Bildbearbeitung nicht gefunden mit Hilfe gefunden § Bilderreihenfolge: Scroll aus dem Bildschirm nicht möglich § Additivität der Filter als problematisch empfunden § Bezeichnung FadeFX unklar § Einzelübergänge gewünscht 22
23. Ergebnisse – Musikanzeige 0 0 0 2 0 0 2 1 5 5 3 2 0 1 2 3 4 5 6 Tutorial Explorativ Tutorial Explorativ Play / Pause Verständnis der Waveform Anzahl VPs Musikanzeige nicht gefunden mit Hilfe gefunden § Play: § Häufig benutzt § Beschränkung auf den Button § Button zu klein § Autoplay (auch nach Rendern) unerwünscht! § Cursor: § Soll bei Bild- und Waveleiste analog sein § Spulen gewünscht 23
24. Ergebnisse – Musikbearbeitung 1 0 3 2 3 2 2 3 1 3 0 0 0 1 2 3 4 5 6 Tutorial Explorativ Tutorial Explorativ Musikausschnitt ändern Zoomout bei Waveform Anzahl VPs Musikbearbeitung nicht gefunden mit Hilfe gefunden „Ich finde es gut, dass ich meine Lieblingsstelle aussuchen kann.“ § Taktweise Sprünge positiv § Unklar, dass es nur Ausschnitt ist § „Musikbearbeitung war schwer“ § Musik-Zoom unklar § Navigation: „Gefühl, keine Kontrolle zu haben“ 24
25. Ergebnisse - Längenanzeige 1 0 0 0 4 5 0 1 2 3 4 5 6 Tutorial Explorativ Längenanzeige Anzahl VPs Längenanzeige nicht gefunden mit Hilfe gefunden § Zunächst unverständlich (Bildgröße??) § Erwartung, dass Anzeige dynamisch ist § Nicht direkt aufgefallen § Am Ende richtig interpretiert 25
26. Ergebnisse – Zurücksetzen 0 0 0 0 1 2 0 1 4 3 5 4 0 1 2 3 4 5 6 Tutorial Explorativ Tutorial Explorativ Zurücksetzen Funktion Zurücksetzen Icon Anzahl VPs Zurücksetzen nicht gefunden mit Hilfe gefunden § Zurücksetzen: Icon verständlich § Ein Schritt zurück gewünscht § Zurücksetzen schwierig empfunden 26
27. Zusammenfassung zu Frage 1 27 Was wurde gefunden und verstanden? • Musik- und Bilderauswahl • Play / Pause • Bearbeitungsmodus aktivieren • Filter hinzufügen • Übergang ändern • Anwenden • Rendern • Teilen Welche Funktionen nicht gefunden? • Bildbearbeitungsfunktionen teilweise nicht gefunden (Bildausschnitt ändern) • FadeFX erst nach Ausprobieren klar • Ändern der Bildreihenfolge nicht immer gefunden • Musikbearbeitung über Waveform z.T. gefunden, aber Funktion unklar (Zoom, Ausschnitt ändern) • Längenanzeige gefunden, aber nicht immer korrekt interpretiert
28. 2. Finden die Nutzer das Tutorial hilfreich? 28
29. System Usability Scale (SUS) - Ergebnisse A- vs. B-Test Ergebnisse - SUS: § Tutorial: § Ø = 66.5, SD 20,96 § Explorativ: § Ø = 71, SD 14,96 § Gesamt: § Ø = 68.75, SD 17,33 E x p l o r a ti v T u t o r i a l • Verbesserung explorative Gruppe • Verschlechterung interaktives Tutorial • SUS Score kritisch zu interpretieren (hohe Streuung) E x p l o r a ti v T u t o r i a l 29
30. Tutorial – Verständnis mit/ohne Tutorial 30 2.00 3.60 3.20 4.80 16.80 13.60 0.0 2.0 4.0 6.0 8.0 10.0 12.0 14.0 16.0 18.0 Tutorial Explorativ Anzahl der gefundenen Funktionen Funktionsverständnis mit / ohne Tutorial nicht gefunden mit Hilfe gefunden
31. Tutorial § Gruppe ohne Tutorial wünscht sich mehr Hinweise / Icons § Funktionen durch Tutorial eher entdeckt (z.B. Bilderreihenfolge) § Tutorial-Länge angemessen § Als restriktiv empfunden § Überspringen gewünscht § Navigation gewünscht § Ärger über schnelles Weiterspringen Ø Verwirrte Nutzer § Weniger Text und mehr Icons / Pfeile gewünscht § Kein Vorteil im SUS ggü. explorativ 31
32. 3. Welche Menüdarstellung wünschen sich die Nutzer? 32
33. Welche Menüdarstellung wünschen sich die Nutzer? § Gruppieren aller Bearbeitungsmöglichkeiten § Filter: Vorschau statt Menü gewünscht (vgl. Puzzle) § Zum Beispiel als Pop-Up Menü 33
34. 4. Würdest du die App benutzen / weiterempfehlen? 34
35. Nutzungsintention 6 JA! 4 Be- dingt Würdest du die App weiterempfehlen? 10 Besonders junge Teilnehmer (13/14 Jahre) 2 JA! 4 Be- dingt Würdest du die App benutzen? 10 4 Nein „… um Urlaubsbilder auf Instagram zu posten“, „für die Oma“ 35
36. Zusammenfassung 36
37. Vergleich zur vorherigen Version § Tendenziell wurden neue Funktionen verstanden § Tendenzielle Verbesserung in der explorativen Gruppe im SUS § Positive Rückmeldung zu neuen Funktionen: § Filterfunktion § Reihenfolge ändern § Übergangsfunktion § Sätzen im Ladescreen § Häufige Nutzung von § Status-Bar § Play-Button 37
38. Beantwortung der Fragen Fragestellung 1. Finden und verstehen die Nutzer die Funktionen der App? 2. Steigert das Tutorial die Anzahl gefundener Funktionen und unterstützt deren Verständnis? 3. Welche zusätzlichen Features / Menüs / Funktionen wünschen sich die Nutzer? 4. Spezifische Fragestellung: Wie interpretieren die Nutzer die Anzeige der Diashow-Dauer? Antwort 1. Teilweise: Je nach Funktion 2. Ja, aber Probleme mit der Gestaltung 3. Tendenz: § Vorschau statt iOS Menü § Funktionen sinnvoll gruppieren 4. Meist richtig interpretiert, aber Mehrwert unklar (Dynamik erwartet) 38
39. Verbesserungsvorschläge 1 Problem § Frust über entfernte Bilder bei Auswahl § Rückgängig-Button? § Benennung Funktionen (FadeFx/Rendern)? § Play-Button § Autoplay? § Probleme mit Musikbearbeitung? Lösungsvorschlag § Warnhinweis § 1-Schritt zurück ergänzen § Umbenennen („Übergang“/“Fertig!“) § Vergrößern / weglassen § Vermeiden § Zeitliche Position im Song anzeigen § Funktionalität im Tutorial deutlicher machen (Ausschnitt!) 39
40. Verbesserungsvorschläge 2 Problem § Tutorial? § Menügestaltung? § Längenanzeige? § Scrollen bei Bildreihenfolge Lösungsvorschlag § Ja, wenn: § Überspringbar § Navigierbar § Weniger Text, mehr Grafiken § Bildvorschau statt iOS-Menü § Zusammenfassung verschiedener Bearbeitungsmöglichkeiten (vgl. Puzzle) § Weglassen oder dynamisch gestalten § Symbol anpassen § Ermöglichen 40
41. Nice to have... § Dauer anpassen (Bild & Gesamtlänge) § Hilfslinien / Snapfunktion § Textverarbeitung (z.B. Titelscreen) § Bildauswahl nachträglich anpassen § Mehr Filter und Farbeffekte sowie Sticker § Mikrofon Funktion + Lautstärke der Musik im Video anpassen (Zielgruppe!) § Bildleiste durch einfachen Klick navigierbar § Durchgehender Cursor für Bild & Ton Aus PicsArt 41
42. Vielen Dank für Eure Aufmerksamkeit und Zusammenarbeit!