A/B Testing in Native Apps Twitter, Facebook, Ihr
!
!Marius Kremeyer
Senior Account Executive D-A-CH !
Toby Urff Solutions Architect
!@optimizely
A/B Testing in Native AppsAgiles
Warum?
60% niemals genutzt (VentureBeat, 2013)
!
> 80% nach einmaliger Nutzung gelöscht
(TechCrunch, 2013)
Warum Ihr?
Quelle: Statista
Bekannte Probleme mit News Apps !
• Usability • Vergrößern von Elementen nicht möglich • Quer- vs. Hochformat • Links funktionieren nicht
• Fehlende Funktionen • Suche • Archiv • Lesezeichen
• Ladezeiten und Abstürze
Quelle: SwissQ
Wer?
• Webseite wird nicht aktiv weiterentwickelt
• Alles auf Mobile !
• Beispiel: Gesamte Navigation • Target: 1% der Nutzer oder bestimmtes
Netzwerk
Wer noch?
• Mobile First • Mangel an App-Entwicklern • Training-Firma aufgekauft • Web-Entwickler —> App-Entwickler
!
• 30-40 Experimente gleichzeitig • @optimizely
# Nutzer die Tweet gesehen haben
Mute Button
“Significant Engagement”-Benachrichtigung
Gesamtes Layout !
• Größe von Bildern • Position von Bildern • Überhaupt Bilder? • Mosaik vs. Vertical Stream
Wer von Euch?
Wie?
• Optimizely SDK • Release • iPhone Verbinden
!
• Visueller Editor * • Flexible Variablen * • Codeblöcke
!
* Keine releases / reviews durch Apple notwendig
Neue Konzepte
Neue Konzepte
Neue Konzepte
Achtung!
1. Unzufriedenheit 2. Einbußen1. Unzufriedene Minderheit 2. Vorübergehende Einbußen
1. Unzufriedene Minderheit !
Netflix Redesign
+1,4% Engagement +0,5% Retention (160.000 Mitglieder)
“Just hold true to the philosophy that the data is what matters”
!Bryan Gumm – Manager of Experimentation - Netflix
2. Vorübergehende Einbußen !
• Nicht zu vermeiden • Schmerzhaft • Lerneffekt überwiegt • Langfristiger Gewinn
Fazit? !
Jetzt Testen!
Fragen