SlideShare una empresa de Scribd logo
1 de 95
Descargar para leer sin conexión
Die Zukunft der Optimierung
1. Warum A/B Testing?
2. 5 Praktische Beispiele
3. Ideen für Tests finden
4. Die Zukunft der Optimierung
MARIUS KREMEYER
Senior Account Executive
Psychologe
marius@optimizely.com
Dan Pete
2006:

Dan Siroker und Pete Koomen

— Product Manager bei Google
2008: 

Dan — Obama Campaign
2008 - 2010: 

Carrotsticks, Spreadly, 

undY Combinator.
2010: Gründung von Optimizely
2012 (Okt.): 100,000th Experiment, over

1 Billion pages. #1 Website Optimization Platform
2013: $28M für Internationalisierung
100K
$28M
Unsere Geschichte
9000 Glückliche Kunden
$57M 2014: $57M für weitere Expansion
1. Warum A/B Testing?
92:1
92$ werden für Trafficakquise ausgegeben, nur 1$ für die Optimierung
* IBM TeaLeaf, 2012
1994
Seit wann optimiert Amazon seine Webseite?
10 - 20
Quelle: Wikimedia.org
Wie viele A/B Tests macht Wikipedia pro Tag?
6000
Quelle: Forbes India
Wie viele A/B Tests macht Google pro Jahr?
Conversion Optimierung mit Optimizely & Web Arts
RICHARD FEYNMAN
“During the Middle Ages there were all kinds of crazy ideas, such as
that a piece of rhinoceros horn would increase potency.
Then a method was discovered for separating ideas […]
And it developed very well, so that we are now in a scientific age.”
RICHARD FEYNMAN
“But even today I meet lots of people who sooner or
later get me into a conversation about UFOs, or
astrology, […] and so forth.
And I’ve concluded that it’s not a scientific world.”
JOHN OHRINGER - CEO SHUTTERSTOCK
“Nothing goes live on Shutterstock without Testing.”
JEFF BEZOS - CEO AMAZON
“Experiments are by their very nature prone to failure.
But a few big successes compensate for dozens and
dozens of things that didn’t work.”
Quelle: Builtwith, Top 10.000 Websites
2. Praktische Beispiele
ALLES HINTERFRAGEN!
700.000 EXPERIMENTE SPÄTER
PRAKTISCHE BEISPIELE
BEISPIEL: CHROME INDUSTRIES
Performen Bilder oder Videos auf Produktseiten
besser?
HYPOTHESE
Wenn: Wir statt Bildern Videos auf die Produktseiten setzen
Dann: Steigen die Bestellungen
Weil: Wir uns durch die Bilder emotionaler angesprochen fühlen.
Conversion Optimierung mit Optimizely & Web Arts
+ 0,2% Conversions
0,2% Uplift in Sales
Videoproduktion teuer
—> Videos nicht rentabel
Große Ersparnis durch die Verwendung von Bildern
LEARNING
BEISPIEL: AUTOSCOUT
Wie kann ich die Anzahl der ausgefüllten
Formulare erhöhen / Abbruchrate senken?
HYPOTHESE
Wenn: Wir potenziellen Käufern einen Standardtext vorgeben
Dann: Füllen mehr Besucher Formulare aus
Weil: Besucher nicht wissen, was Sie dem Verkäufer schreiben sollen
+ 21% Ausgefüllte Formulare
Nehmen Sie den Besuchern Arbeit ab. Es wird sich
auszahlen.
LEARNING
BEISPIEL: MAGINE
Wie erhöhen wir die Anzahl neuer Abonnenten?
HYPOTHESE
Wenn: Wir eine Grafik zum Anmeldeprozess auf der Landing Page
einsetzen
Dann: Steigen die Anmeldungen
Weil: Die Besucher genau wissen, welche Schritte auf Sie zukommen
werden
- 2% Klicks
+ 9% Abonnenten
Weniger Micro Conversions (Klicks)
Mehr Macro Conversions (Anmeldungen)
Da Nutzer wissen, worauf sie sich einlassen.
LEARNING
BEISPIEL: BLEACHER REPORT
Wie erhöhen wir Facebook Likes und somit
Wiederkehrenden Traffic?
HYPOTHESE
Wenn: Wir die Box für Social Shares besser* darstellen
Dann: Steigen die Fans auf Facebook und wiederkehrender Traffic
Weil: Die Besucher eine andere Darstellung der Box weniger
aufdringlich finden
ORIGINAL
SOCIAL CONVERSIONS
HEUTE: SOCIAL PROMOTION
ERGEBNIS
+ 764% Social Conversions
3. Ideen für Tests finden
OPTIMIERUNGSZYKLUS
Ergebnisse!
Analyse!
Hypothesen!
Priorisierung!
A/BTest!
ABER WO FANGE ICH AN?
ANALYTICS
ANALYTICS
Visits
Sign-Ups
$ per
Recipient
Visitors
per Day
Email $$
ANALYTICS
Visits
Sign-Ups
$ per
Recipient
Visitors
per Day
Email $$
TICKETS / FRAGEN
NUTZER TESTS / USER-TESTS
HEATMAPS / EYETRACKING
Quelle: ClickTale, Eyequant
WETTBEWERBERANALYSE
1. Welche Webseiten nutzen Sie gerne?
2. Wer sind Ihre direkten Wettbewerber?
3. Was funktioniert in anderen Branchen /
Kategorien besonders gut?
4. Die Zukunft der Optimierung
Optimizely ist für A/B
Testing von Webseiten…
…UND AUCH FÜR:
• Personalisierungskampagnen
• Segmentierung von Besuchergruppen
• Agile Entwicklung & Deployments
• Optimierung mobiler Webseiten
• Optimierung von Apps in iOS & Android
• Cross-Channel Optimierung
PERSONALISIERUNG
HYPOTHESE (DATING)
Wenn: Wir Personen, die sich noch kein Konto
erstellt haben, jeweils eine Person des anderen
Geschlechts zeigen
Dann: Erhöhen wir die Anzahl der Anmeldungen
Weil: Nutzer sich persönlich angesprochen fühlen.
ORIGINAL
VARIANTE IN OPTIMIZELY ANLEGEN
AUDIENCE IN OPTIMIZELY ANLEGEN
PERSONALISIERUNG MIT GEO-LOCATION
Wenn: Wir die Ansprache auf die Stadt beziehen
Dann: Werden mehr Besucher einen Termin bei der Parfümerie in
ihrer Nähe buchen
Weil: Nutzer sich persönlich angesprochen fühlen
HYPOTHESE
ORIGINAL
AUDIENCE ANLEGEN - LOCATION
VARIANTE - STADTSPEZIFISCH
Vs.
VERGLEICH - ORIGINAL & VARIANTE B
MOBILE OPTIMIERUNG
MOBILE EATS THE WORLD
Quelle: ComScore
Conversion Optimierung mit Optimizely & Web Arts
SCHLECHTE MOBILE-ERFAHRUNGEN
Quelle: Smashingmagazine, 2013
MOBILE-ERFAHRUNGEN
Conversion Optimierung mit Optimizely & Web Arts
MOBILE VS. WEB
BEISPIEL: NOTEBOOKSBILLIGER
Wie verringere ich die Abbruchrate beim mobilen Checkout?
Wenn: Shop Besucher Social Log-In
beim Check-Out nutzen können
Dann: Werden mehr Besucher den Kauf
abschließen
Weil: Nutzer Bequemlichkeit schätzen und
keinen zusätzlichen Account anlegen
müssen
HYPOTHESE
DESKTOP CHECKOUT
- Ohne Registrierung
- Social Log-in
- Log-in Wall
- Kein “Social Log-in”
MOBILER CHECKOUT
TESTIDEE
1. Shoppen ohne Registrierung erlauben
2. Einloggen mit Facebook ermöglichen
3. Warum sollte ich mich registrieren?
BEISPIEL: ASOS
- Mehre Social Log-ins
- Zahlmethoden klar
- Geschlossener Check-Out
OPTIMIERUNG MOBILER APPS
Conversion Optimierung mit Optimizely & Web Arts
BEISPIEL: FRENCH GIRLS
1 Million Downloads
Problem: User Retention
Ziel: Onboarding optimieren
AKTIVIERUNG NEUER USER
Aktivierung bei French Girls:
Selfie aufnehmen
Selfie zeichnen
Activation Rate: 25%
Wenn: Wir die Reihenfolge der Aktivitäten im Onboarding
ändern
Dann: Steigern wir die Anzahl aktivierter User
Weil: User eher Aktionen ausführen, die sie wenig
Aufwand kosten und bekannt sind (Selfie aufnehmen)
HYPOTHESE
Conversion Optimierung mit Optimizely & Web Arts
+ 100% Uplift in Nutzeraktivierung
CROSS-CHANNEL OPTIMIERUNG
Desktop
SEOSEM E-Mail
2010
Desktop 2015Desktop Smartphone Tablet
SEO SocialSEM E-Mail Push Native Ads
Desktop 2015Desktop Smartphone Tablet
SEO SocialSEM E-Mail Push Native Ads
2015
STEFAN KAUFT SCHUHE
• Shoppt in der Zalando App im Zug auf
dem Weg nach hause, wird dabei aber
unterbrochen
• Sitzt auf dem Sofa und sieht einen
Zalando Spot, googelt Zalando auf
dem Smartphone
• Verlässt das Sofa und schließt den
Einkauf auf dem Desktop ab
TANJA BUCHT EINEN FLUG
• Kriegt eine Einladung zum Geburtstag auf
der Facebook App – wechselt in die
Lufthansa App und schaut wie teuer ein
Flug ist
• Zu hause angekommen, vergleicht Preise
auf anderen Webseiten und bucht dann
direkt auf der Lufthansa Desktop Webseite
• Erhält Erinnerung für Check-In als Push
Notification 24 Stunden vor Flug
BEISPIEL: HIPMUNK
Letzte Suche als
Default, wenn
man Endgerät
wechselt
BEISPIEL: GILT
Abbruchrate
durch Push-
Notifications
senken
Conversion Optimierung mit Optimizely & Web Arts
Data
Sie Ihre Besucher
Action
Vielen Dank!
marius@optimizely.com
Kontaktdaten:

Más contenido relacionado

Más de Optimizely

Clover Rings Up Digital Growth to Drive Experimentation
Clover Rings Up Digital Growth to Drive ExperimentationClover Rings Up Digital Growth to Drive Experimentation
Clover Rings Up Digital Growth to Drive ExperimentationOptimizely
 
Make Every Touchpoint Count: How to Drive Revenue in an Increasingly Online W...
Make Every Touchpoint Count: How to Drive Revenue in an Increasingly Online W...Make Every Touchpoint Count: How to Drive Revenue in an Increasingly Online W...
Make Every Touchpoint Count: How to Drive Revenue in an Increasingly Online W...Optimizely
 
The Science of Getting Testing Right
The Science of Getting Testing RightThe Science of Getting Testing Right
The Science of Getting Testing RightOptimizely
 
Atlassian's Mystique CLI, Minimizing the Experiment Development Cycle
Atlassian's Mystique CLI, Minimizing the Experiment Development CycleAtlassian's Mystique CLI, Minimizing the Experiment Development Cycle
Atlassian's Mystique CLI, Minimizing the Experiment Development CycleOptimizely
 
Autotrader Case Study: Migrating from Home-Grown Testing to Best-in-Class Too...
Autotrader Case Study: Migrating from Home-Grown Testing to Best-in-Class Too...Autotrader Case Study: Migrating from Home-Grown Testing to Best-in-Class Too...
Autotrader Case Study: Migrating from Home-Grown Testing to Best-in-Class Too...Optimizely
 
Zillow + Optimizely: Building the Bridge to $20 Billion Revenue
Zillow + Optimizely: Building the Bridge to $20 Billion RevenueZillow + Optimizely: Building the Bridge to $20 Billion Revenue
Zillow + Optimizely: Building the Bridge to $20 Billion RevenueOptimizely
 
The Future of Optimizely for Technical Teams
The Future of Optimizely for Technical TeamsThe Future of Optimizely for Technical Teams
The Future of Optimizely for Technical TeamsOptimizely
 
Empowering Agents to Provide Service from Anywhere: Contact Centers in the Ti...
Empowering Agents to Provide Service from Anywhere: Contact Centers in the Ti...Empowering Agents to Provide Service from Anywhere: Contact Centers in the Ti...
Empowering Agents to Provide Service from Anywhere: Contact Centers in the Ti...Optimizely
 
Experimentation Everywhere: Create Exceptional Online Shopping Experiences an...
Experimentation Everywhere: Create Exceptional Online Shopping Experiences an...Experimentation Everywhere: Create Exceptional Online Shopping Experiences an...
Experimentation Everywhere: Create Exceptional Online Shopping Experiences an...Optimizely
 
Building an Experiment Pipeline for GitHub’s New Free Team Offering
Building an Experiment Pipeline for GitHub’s New Free Team OfferingBuilding an Experiment Pipeline for GitHub’s New Free Team Offering
Building an Experiment Pipeline for GitHub’s New Free Team OfferingOptimizely
 
AMC Networks Experiments Faster on the Server Side
AMC Networks Experiments Faster on the Server SideAMC Networks Experiments Faster on the Server Side
AMC Networks Experiments Faster on the Server SideOptimizely
 
Evolving Experimentation from CRO to Product Development
Evolving Experimentation from CRO to Product DevelopmentEvolving Experimentation from CRO to Product Development
Evolving Experimentation from CRO to Product DevelopmentOptimizely
 
Overcoming the Challenges of Experimentation on a Service Oriented Architecture
Overcoming the Challenges of Experimentation on a Service Oriented ArchitectureOvercoming the Challenges of Experimentation on a Service Oriented Architecture
Overcoming the Challenges of Experimentation on a Service Oriented ArchitectureOptimizely
 
How The Zebra Utilized Feature Experiments To Increase Carrier Card Engagemen...
How The Zebra Utilized Feature Experiments To Increase Carrier Card Engagemen...How The Zebra Utilized Feature Experiments To Increase Carrier Card Engagemen...
How The Zebra Utilized Feature Experiments To Increase Carrier Card Engagemen...Optimizely
 
Making Your Hypothesis Work Harder to Inform Future Product Strategy
Making Your Hypothesis Work Harder to Inform Future Product StrategyMaking Your Hypothesis Work Harder to Inform Future Product Strategy
Making Your Hypothesis Work Harder to Inform Future Product StrategyOptimizely
 
Kick Your Assumptions: How Scholl's Test-Everything Culture Drives Revenue
Kick Your Assumptions: How Scholl's Test-Everything Culture Drives RevenueKick Your Assumptions: How Scholl's Test-Everything Culture Drives Revenue
Kick Your Assumptions: How Scholl's Test-Everything Culture Drives RevenueOptimizely
 
Experimentation through Clients' Eyes
Experimentation through Clients' EyesExperimentation through Clients' Eyes
Experimentation through Clients' EyesOptimizely
 
Shipping to Learn and Accelerate Growth with GitHub
Shipping to Learn and Accelerate Growth with GitHubShipping to Learn and Accelerate Growth with GitHub
Shipping to Learn and Accelerate Growth with GitHubOptimizely
 
Test Everything: TrustRadius Delivers Customer Value with Experimentation
Test Everything: TrustRadius Delivers Customer Value with ExperimentationTest Everything: TrustRadius Delivers Customer Value with Experimentation
Test Everything: TrustRadius Delivers Customer Value with ExperimentationOptimizely
 
Optimizely Agent: Scaling Resilient Feature Delivery
Optimizely Agent: Scaling Resilient Feature DeliveryOptimizely Agent: Scaling Resilient Feature Delivery
Optimizely Agent: Scaling Resilient Feature DeliveryOptimizely
 

Más de Optimizely (20)

Clover Rings Up Digital Growth to Drive Experimentation
Clover Rings Up Digital Growth to Drive ExperimentationClover Rings Up Digital Growth to Drive Experimentation
Clover Rings Up Digital Growth to Drive Experimentation
 
Make Every Touchpoint Count: How to Drive Revenue in an Increasingly Online W...
Make Every Touchpoint Count: How to Drive Revenue in an Increasingly Online W...Make Every Touchpoint Count: How to Drive Revenue in an Increasingly Online W...
Make Every Touchpoint Count: How to Drive Revenue in an Increasingly Online W...
 
The Science of Getting Testing Right
The Science of Getting Testing RightThe Science of Getting Testing Right
The Science of Getting Testing Right
 
Atlassian's Mystique CLI, Minimizing the Experiment Development Cycle
Atlassian's Mystique CLI, Minimizing the Experiment Development CycleAtlassian's Mystique CLI, Minimizing the Experiment Development Cycle
Atlassian's Mystique CLI, Minimizing the Experiment Development Cycle
 
Autotrader Case Study: Migrating from Home-Grown Testing to Best-in-Class Too...
Autotrader Case Study: Migrating from Home-Grown Testing to Best-in-Class Too...Autotrader Case Study: Migrating from Home-Grown Testing to Best-in-Class Too...
Autotrader Case Study: Migrating from Home-Grown Testing to Best-in-Class Too...
 
Zillow + Optimizely: Building the Bridge to $20 Billion Revenue
Zillow + Optimizely: Building the Bridge to $20 Billion RevenueZillow + Optimizely: Building the Bridge to $20 Billion Revenue
Zillow + Optimizely: Building the Bridge to $20 Billion Revenue
 
The Future of Optimizely for Technical Teams
The Future of Optimizely for Technical TeamsThe Future of Optimizely for Technical Teams
The Future of Optimizely for Technical Teams
 
Empowering Agents to Provide Service from Anywhere: Contact Centers in the Ti...
Empowering Agents to Provide Service from Anywhere: Contact Centers in the Ti...Empowering Agents to Provide Service from Anywhere: Contact Centers in the Ti...
Empowering Agents to Provide Service from Anywhere: Contact Centers in the Ti...
 
Experimentation Everywhere: Create Exceptional Online Shopping Experiences an...
Experimentation Everywhere: Create Exceptional Online Shopping Experiences an...Experimentation Everywhere: Create Exceptional Online Shopping Experiences an...
Experimentation Everywhere: Create Exceptional Online Shopping Experiences an...
 
Building an Experiment Pipeline for GitHub’s New Free Team Offering
Building an Experiment Pipeline for GitHub’s New Free Team OfferingBuilding an Experiment Pipeline for GitHub’s New Free Team Offering
Building an Experiment Pipeline for GitHub’s New Free Team Offering
 
AMC Networks Experiments Faster on the Server Side
AMC Networks Experiments Faster on the Server SideAMC Networks Experiments Faster on the Server Side
AMC Networks Experiments Faster on the Server Side
 
Evolving Experimentation from CRO to Product Development
Evolving Experimentation from CRO to Product DevelopmentEvolving Experimentation from CRO to Product Development
Evolving Experimentation from CRO to Product Development
 
Overcoming the Challenges of Experimentation on a Service Oriented Architecture
Overcoming the Challenges of Experimentation on a Service Oriented ArchitectureOvercoming the Challenges of Experimentation on a Service Oriented Architecture
Overcoming the Challenges of Experimentation on a Service Oriented Architecture
 
How The Zebra Utilized Feature Experiments To Increase Carrier Card Engagemen...
How The Zebra Utilized Feature Experiments To Increase Carrier Card Engagemen...How The Zebra Utilized Feature Experiments To Increase Carrier Card Engagemen...
How The Zebra Utilized Feature Experiments To Increase Carrier Card Engagemen...
 
Making Your Hypothesis Work Harder to Inform Future Product Strategy
Making Your Hypothesis Work Harder to Inform Future Product StrategyMaking Your Hypothesis Work Harder to Inform Future Product Strategy
Making Your Hypothesis Work Harder to Inform Future Product Strategy
 
Kick Your Assumptions: How Scholl's Test-Everything Culture Drives Revenue
Kick Your Assumptions: How Scholl's Test-Everything Culture Drives RevenueKick Your Assumptions: How Scholl's Test-Everything Culture Drives Revenue
Kick Your Assumptions: How Scholl's Test-Everything Culture Drives Revenue
 
Experimentation through Clients' Eyes
Experimentation through Clients' EyesExperimentation through Clients' Eyes
Experimentation through Clients' Eyes
 
Shipping to Learn and Accelerate Growth with GitHub
Shipping to Learn and Accelerate Growth with GitHubShipping to Learn and Accelerate Growth with GitHub
Shipping to Learn and Accelerate Growth with GitHub
 
Test Everything: TrustRadius Delivers Customer Value with Experimentation
Test Everything: TrustRadius Delivers Customer Value with ExperimentationTest Everything: TrustRadius Delivers Customer Value with Experimentation
Test Everything: TrustRadius Delivers Customer Value with Experimentation
 
Optimizely Agent: Scaling Resilient Feature Delivery
Optimizely Agent: Scaling Resilient Feature DeliveryOptimizely Agent: Scaling Resilient Feature Delivery
Optimizely Agent: Scaling Resilient Feature Delivery
 

Conversion Optimierung mit Optimizely & Web Arts