SlideShare una empresa de Scribd logo
1 de 19
Descargar para leer sin conexión
A/B testování pro MAGNET Blancheporte
Petra Kalábová & Pavel Jašek. Klub WebTop100 19. listopadu 2009
O čem budeme povídat
1.    MAGNET Blancheporte
2.    Výchozí situace
3.    Co se testovalo
4.    Co předcházelo testování
5.    Postup testování
6.    Vyhodnocení
7.    Co dál?

dokument | A/B testování nákupního košíku   datum | 19. listopadu 2009   snímek | 2
           pro MAGNET Blancheporte
MAGNET Blancheporte
• Zabýváme se zásilkovým obchodem v Čechách, na
  Slovensku a na Ukrajině
• Nabízíme elegantní francouzskou módu, dekorace
  a doplňky do domácnosti
• Na českém trhu působíme již od roku 1967
• Jsme součástí nadnárodní společnosti 3Suisses
  International
• Cílová skupina na internetu: ženy 47+
• Noví zákazníci mají největší problém s kódem
  výhody



dokument | A/B testování nákupního košíku   datum | 19. listopadu 2009   snímek | 3
           pro MAGNET Blancheporte
Výchozí situace
• Velký dotazník → upřesnily se cílové skupiny
• Jak jim pomoci → vylepšení použitelnosti
• Brainstorming v DW (Adam+Pavel)
   o Google Analytics
   o Expertní názor Adama
• Schůzka s Dobrým webem
   o Diskuse problémových míst
   o Co lze řešit (vs. technické schopnosti e-shopu;
     vs. plány MBP)
   o Důležitost, prioritizace
   o Doporučení testování

dokument | A/B testování nákupního košíku   datum | 19. listopadu 2009   snímek | 4
           pro MAGNET Blancheporte
A/B testování nákupního košíku   19. listopadu 2009
                                                  5
pro MAGNET Blancheporte
A/B Testování nákupního košíku
Co lze testovat
• Výzvy k akcím + rozložení
Co a jak nelze testovat
• Moc věcí najednou




dokument | A/B testování nákupního košíku   datum | 19. listopadu 2009   snímek | 6
           pro MAGNET Blancheporte
Co předcházelo testování
• Malá zkušební verze. Jaké mohou být problémy?




dokument | A/B testování nákupního košíku   datum | 19. listopadu 2009   snímek | 7
           pro MAGNET Blancheporte
Co předcházelo testování
Odhad doby testování
• http://abtester.com/calculator/
Metriky + odhadové hodnoty
• Procento dokončení objednávacího procesu
• Vědět o možných problémech výpočtu (jiná
  cesta uživatele)


dokument | A/B testování nákupního košíku   datum | 19. listopadu 2009   snímek | 8
           pro MAGNET Blancheporte
Postup testování: Cíle
1. Vylepšit použitelnost → větší tržby
2. Vyzkoušet vůbec testování jako takové
3. Je odhad vylepšení reálný?
     » Testování může (a občas i musí) dopadnout špatně




dokument | A/B testování nákupního košíku   datum | 19. listopadu 2009   snímek | 9
           pro MAGNET Blancheporte
Problémy testování, o kterých se ví
• Sezónní vlivy + externí faktory (emailové
  kampaně)
• Mnoho změn najednou může škodit
• Segmentace vs. technické řešení




dokument | A/B testování nákupního košíku   datum | 19. listopadu 2009   snímek | 10
           pro MAGNET Blancheporte
Harmonogram
• Zúčastněné
  strany
     » Zodpovědnost
     » kontroly
• Reálné, spíše
  pesimistické
  odhady


dokument | A/B testování nákupního košíku   datum | 19. listopadu 2009   snímek | 11
           pro MAGNET Blancheporte
Wireframe




A/B testování nákupního košíku   19. listopadu 2009
                                                  12
pro MAGNET Blancheporte
„A“




      13
„B“




      14
Testování testování
Nepodcenit vyzkoušení, zda to všechno
  funguje
• Programátoři to mohli nasadit špatně
• Mohly přijít špatné instrukce z Dobrého webu
• Neměřilo by to správně
• Mohlo by to mást návštěvníky → zbytečně by
  se ztrácely peníze

dokument | A/B testování nákupního košíku   datum | 19. listopadu 2009   snímek | 15
           pro MAGNET Blancheporte
Průběžné sledování
• Statistické zpřesňování
• Zlepšení oproti původní variantě se
  pohybovalo od 5 do 30 %




dokument | A/B testování nákupního košíku   datum | 19. listopadu 2009   snímek | 16
           pro MAGNET Blancheporte
Vyhodnocení




Počet návštěvníků v experimentu
• v každé verzi přes 3500
Přínosy pro Magnet Blancheporte
Ani to tak nebolelo 
• rychlá návratnost
• jednoduchá implementace
• poznání procesu testování
dokument | A/B testování nákupního košíku   datum | 19. listopadu 2009   snímek | 17
           pro MAGNET Blancheporte
Co dál?
Vyzkoušet toto testování na Slovensku,
  Ukrajině
• Jiné problémy a příležitosti
Dále analyzovat problémy nakupujících a
  zpříjemnit jim cestu k objednávce
• Protože víme, že se to vyplácí



dokument | A/B testování nákupního košíku   datum | 19. listopadu 2009   snímek | 18
           pro MAGNET Blancheporte
Uff. To je vše.
Petra Kalábová                                    Pavel Jašek
Marketing specialist                              Konzultant

MAGNET Blancheporte                               Dobrý web
CEMOD - CZ a.s.                                   Internet Info, s.r.o.
tel.: + 420 466 040 627                           tel.: + 420 277 004 656
petra.kalabova@cemod.cz                           pavel.jasek@dobryweb.cz
www.magnet-blanche-porte.cz                       http://www.dobryweb.cz




dokument | A/B testování nákupního košíku   datum | 19. listopadu 2009      snímek | 19
           pro MAGNET Blancheporte

Más contenido relacionado

Más de Akce Dobrého webu

Daniel Frouz: Cíl redesignu? Výrazně vyšší výkon
Daniel Frouz: Cíl redesignu? Výrazně vyšší výkonDaniel Frouz: Cíl redesignu? Výrazně vyšší výkon
Daniel Frouz: Cíl redesignu? Výrazně vyšší výkonAkce Dobrého webu
 
Ratibor Líbal: Jak zaujmout, odlišit se a vydělat
Ratibor Líbal: Jak zaujmout, odlišit se a vydělatRatibor Líbal: Jak zaujmout, odlišit se a vydělat
Ratibor Líbal: Jak zaujmout, odlišit se a vydělatAkce Dobrého webu
 
Redesign webu - Martin Hoffmann
Redesign webu - Martin HoffmannRedesign webu - Martin Hoffmann
Redesign webu - Martin HoffmannAkce Dobrého webu
 
Redesign webu Telefonica O2 - Jakub karlec
Redesign webu Telefonica O2 - Jakub karlec Redesign webu Telefonica O2 - Jakub karlec
Redesign webu Telefonica O2 - Jakub karlec Akce Dobrého webu
 
Affiliate Marketing - Vladan Hejnic
Affiliate Marketing - Vladan HejnicAffiliate Marketing - Vladan Hejnic
Affiliate Marketing - Vladan HejnicAkce Dobrého webu
 
Praktické využití novinek v Google Analytics - Pavel Jašek
Praktické využití novinek v Google Analytics - Pavel JašekPraktické využití novinek v Google Analytics - Pavel Jašek
Praktické využití novinek v Google Analytics - Pavel JašekAkce Dobrého webu
 
Jak pracovat s Customer Lifetime Value při vyhodnocování kampaní - Martin Pěn...
Jak pracovat s Customer Lifetime Value při vyhodnocování kampaní - Martin Pěn...Jak pracovat s Customer Lifetime Value při vyhodnocování kampaní - Martin Pěn...
Jak pracovat s Customer Lifetime Value při vyhodnocování kampaní - Martin Pěn...Akce Dobrého webu
 
Co nového pod sluncem? - Ivan Pilný
Co nového pod sluncem? - Ivan PilnýCo nového pod sluncem? - Ivan Pilný
Co nového pod sluncem? - Ivan PilnýAkce Dobrého webu
 
Sociální média v České spořitelně - David Lorenc
Sociální média v České spořitelně - David LorencSociální média v České spořitelně - David Lorenc
Sociální média v České spořitelně - David LorencAkce Dobrého webu
 
Krizová komunikace na webu - Daniel Dočekal
Krizová komunikace na webu - Daniel DočekalKrizová komunikace na webu - Daniel Dočekal
Krizová komunikace na webu - Daniel DočekalAkce Dobrého webu
 
5 SEO nástrojů, které nakopnou váš web - Jiří Koutný
5 SEO nástrojů, které nakopnou váš web - Jiří Koutný5 SEO nástrojů, které nakopnou váš web - Jiří Koutný
5 SEO nástrojů, které nakopnou váš web - Jiří KoutnýAkce Dobrého webu
 
Vyhodnocování SEO - Michael Blahut
Vyhodnocování SEO - Michael BlahutVyhodnocování SEO - Michael Blahut
Vyhodnocování SEO - Michael BlahutAkce Dobrého webu
 
Customer Intelligence na webu - Lucie Staňková
Customer Intelligence na webu - Lucie StaňkováCustomer Intelligence na webu - Lucie Staňková
Customer Intelligence na webu - Lucie StaňkováAkce Dobrého webu
 
Začněte testovat na dálku. Levnější už to nebude. - Petr Štědrý
Začněte testovat na dálku. Levnější už to nebude. - Petr ŠtědrýZačněte testovat na dálku. Levnější už to nebude. - Petr Štědrý
Začněte testovat na dálku. Levnější už to nebude. - Petr ŠtědrýAkce Dobrého webu
 
Typické prvky webu - Lukáš Hroch
Typické prvky webu - Lukáš HrochTypické prvky webu - Lukáš Hroch
Typické prvky webu - Lukáš HrochAkce Dobrého webu
 
Zavedení UX do firmy - Jiří Mžourek
Zavedení UX do firmy - Jiří MžourekZavedení UX do firmy - Jiří Mžourek
Zavedení UX do firmy - Jiří MžourekAkce Dobrého webu
 
Budiness Value of User-Centered Design and Usability - Jeff Johnson
Budiness Value of User-Centered Design and Usability - Jeff JohnsonBudiness Value of User-Centered Design and Usability - Jeff Johnson
Budiness Value of User-Centered Design and Usability - Jeff JohnsonAkce Dobrého webu
 
Mezioborová spolupráce - Christian Jansen
Mezioborová spolupráce - Christian JansenMezioborová spolupráce - Christian Jansen
Mezioborová spolupráce - Christian JansenAkce Dobrého webu
 

Más de Akce Dobrého webu (20)

Daniel Frouz: Cíl redesignu? Výrazně vyšší výkon
Daniel Frouz: Cíl redesignu? Výrazně vyšší výkonDaniel Frouz: Cíl redesignu? Výrazně vyšší výkon
Daniel Frouz: Cíl redesignu? Výrazně vyšší výkon
 
Ratibor Líbal: Jak zaujmout, odlišit se a vydělat
Ratibor Líbal: Jak zaujmout, odlišit se a vydělatRatibor Líbal: Jak zaujmout, odlišit se a vydělat
Ratibor Líbal: Jak zaujmout, odlišit se a vydělat
 
Redesign webu - Martin Hoffmann
Redesign webu - Martin HoffmannRedesign webu - Martin Hoffmann
Redesign webu - Martin Hoffmann
 
Redesign webu Telefonica O2 - Jakub karlec
Redesign webu Telefonica O2 - Jakub karlec Redesign webu Telefonica O2 - Jakub karlec
Redesign webu Telefonica O2 - Jakub karlec
 
Affiliate Marketing - Vladan Hejnic
Affiliate Marketing - Vladan HejnicAffiliate Marketing - Vladan Hejnic
Affiliate Marketing - Vladan Hejnic
 
Praktické využití novinek v Google Analytics - Pavel Jašek
Praktické využití novinek v Google Analytics - Pavel JašekPraktické využití novinek v Google Analytics - Pavel Jašek
Praktické využití novinek v Google Analytics - Pavel Jašek
 
SEO a PPC - Matěj Novák
SEO a PPC - Matěj NovákSEO a PPC - Matěj Novák
SEO a PPC - Matěj Novák
 
Jak pracovat s Customer Lifetime Value při vyhodnocování kampaní - Martin Pěn...
Jak pracovat s Customer Lifetime Value při vyhodnocování kampaní - Martin Pěn...Jak pracovat s Customer Lifetime Value při vyhodnocování kampaní - Martin Pěn...
Jak pracovat s Customer Lifetime Value při vyhodnocování kampaní - Martin Pěn...
 
Co nového pod sluncem? - Ivan Pilný
Co nového pod sluncem? - Ivan PilnýCo nového pod sluncem? - Ivan Pilný
Co nového pod sluncem? - Ivan Pilný
 
Remarketing - Filip Hráček
Remarketing - Filip HráčekRemarketing - Filip Hráček
Remarketing - Filip Hráček
 
Sociální média v České spořitelně - David Lorenc
Sociální média v České spořitelně - David LorencSociální média v České spořitelně - David Lorenc
Sociální média v České spořitelně - David Lorenc
 
Krizová komunikace na webu - Daniel Dočekal
Krizová komunikace na webu - Daniel DočekalKrizová komunikace na webu - Daniel Dočekal
Krizová komunikace na webu - Daniel Dočekal
 
5 SEO nástrojů, které nakopnou váš web - Jiří Koutný
5 SEO nástrojů, které nakopnou váš web - Jiří Koutný5 SEO nástrojů, které nakopnou váš web - Jiří Koutný
5 SEO nástrojů, které nakopnou váš web - Jiří Koutný
 
Vyhodnocování SEO - Michael Blahut
Vyhodnocování SEO - Michael BlahutVyhodnocování SEO - Michael Blahut
Vyhodnocování SEO - Michael Blahut
 
Customer Intelligence na webu - Lucie Staňková
Customer Intelligence na webu - Lucie StaňkováCustomer Intelligence na webu - Lucie Staňková
Customer Intelligence na webu - Lucie Staňková
 
Začněte testovat na dálku. Levnější už to nebude. - Petr Štědrý
Začněte testovat na dálku. Levnější už to nebude. - Petr ŠtědrýZačněte testovat na dálku. Levnější už to nebude. - Petr Štědrý
Začněte testovat na dálku. Levnější už to nebude. - Petr Štědrý
 
Typické prvky webu - Lukáš Hroch
Typické prvky webu - Lukáš HrochTypické prvky webu - Lukáš Hroch
Typické prvky webu - Lukáš Hroch
 
Zavedení UX do firmy - Jiří Mžourek
Zavedení UX do firmy - Jiří MžourekZavedení UX do firmy - Jiří Mžourek
Zavedení UX do firmy - Jiří Mžourek
 
Budiness Value of User-Centered Design and Usability - Jeff Johnson
Budiness Value of User-Centered Design and Usability - Jeff JohnsonBudiness Value of User-Centered Design and Usability - Jeff Johnson
Budiness Value of User-Centered Design and Usability - Jeff Johnson
 
Mezioborová spolupráce - Christian Jansen
Mezioborová spolupráce - Christian JansenMezioborová spolupráce - Christian Jansen
Mezioborová spolupráce - Christian Jansen
 

A/B testování pro MAGNET Blancheporte - Pavel Jašek, Petra Kalábová

  • 1. A/B testování pro MAGNET Blancheporte Petra Kalábová & Pavel Jašek. Klub WebTop100 19. listopadu 2009
  • 2. O čem budeme povídat 1. MAGNET Blancheporte 2. Výchozí situace 3. Co se testovalo 4. Co předcházelo testování 5. Postup testování 6. Vyhodnocení 7. Co dál? dokument | A/B testování nákupního košíku datum | 19. listopadu 2009 snímek | 2 pro MAGNET Blancheporte
  • 3. MAGNET Blancheporte • Zabýváme se zásilkovým obchodem v Čechách, na Slovensku a na Ukrajině • Nabízíme elegantní francouzskou módu, dekorace a doplňky do domácnosti • Na českém trhu působíme již od roku 1967 • Jsme součástí nadnárodní společnosti 3Suisses International • Cílová skupina na internetu: ženy 47+ • Noví zákazníci mají největší problém s kódem výhody dokument | A/B testování nákupního košíku datum | 19. listopadu 2009 snímek | 3 pro MAGNET Blancheporte
  • 4. Výchozí situace • Velký dotazník → upřesnily se cílové skupiny • Jak jim pomoci → vylepšení použitelnosti • Brainstorming v DW (Adam+Pavel) o Google Analytics o Expertní názor Adama • Schůzka s Dobrým webem o Diskuse problémových míst o Co lze řešit (vs. technické schopnosti e-shopu; vs. plány MBP) o Důležitost, prioritizace o Doporučení testování dokument | A/B testování nákupního košíku datum | 19. listopadu 2009 snímek | 4 pro MAGNET Blancheporte
  • 5. A/B testování nákupního košíku 19. listopadu 2009 5 pro MAGNET Blancheporte
  • 6. A/B Testování nákupního košíku Co lze testovat • Výzvy k akcím + rozložení Co a jak nelze testovat • Moc věcí najednou dokument | A/B testování nákupního košíku datum | 19. listopadu 2009 snímek | 6 pro MAGNET Blancheporte
  • 7. Co předcházelo testování • Malá zkušební verze. Jaké mohou být problémy? dokument | A/B testování nákupního košíku datum | 19. listopadu 2009 snímek | 7 pro MAGNET Blancheporte
  • 8. Co předcházelo testování Odhad doby testování • http://abtester.com/calculator/ Metriky + odhadové hodnoty • Procento dokončení objednávacího procesu • Vědět o možných problémech výpočtu (jiná cesta uživatele) dokument | A/B testování nákupního košíku datum | 19. listopadu 2009 snímek | 8 pro MAGNET Blancheporte
  • 9. Postup testování: Cíle 1. Vylepšit použitelnost → větší tržby 2. Vyzkoušet vůbec testování jako takové 3. Je odhad vylepšení reálný? » Testování může (a občas i musí) dopadnout špatně dokument | A/B testování nákupního košíku datum | 19. listopadu 2009 snímek | 9 pro MAGNET Blancheporte
  • 10. Problémy testování, o kterých se ví • Sezónní vlivy + externí faktory (emailové kampaně) • Mnoho změn najednou může škodit • Segmentace vs. technické řešení dokument | A/B testování nákupního košíku datum | 19. listopadu 2009 snímek | 10 pro MAGNET Blancheporte
  • 11. Harmonogram • Zúčastněné strany » Zodpovědnost » kontroly • Reálné, spíše pesimistické odhady dokument | A/B testování nákupního košíku datum | 19. listopadu 2009 snímek | 11 pro MAGNET Blancheporte
  • 12. Wireframe A/B testování nákupního košíku 19. listopadu 2009 12 pro MAGNET Blancheporte
  • 13. „A“ 13
  • 14. „B“ 14
  • 15. Testování testování Nepodcenit vyzkoušení, zda to všechno funguje • Programátoři to mohli nasadit špatně • Mohly přijít špatné instrukce z Dobrého webu • Neměřilo by to správně • Mohlo by to mást návštěvníky → zbytečně by se ztrácely peníze dokument | A/B testování nákupního košíku datum | 19. listopadu 2009 snímek | 15 pro MAGNET Blancheporte
  • 16. Průběžné sledování • Statistické zpřesňování • Zlepšení oproti původní variantě se pohybovalo od 5 do 30 % dokument | A/B testování nákupního košíku datum | 19. listopadu 2009 snímek | 16 pro MAGNET Blancheporte
  • 17. Vyhodnocení Počet návštěvníků v experimentu • v každé verzi přes 3500 Přínosy pro Magnet Blancheporte Ani to tak nebolelo  • rychlá návratnost • jednoduchá implementace • poznání procesu testování dokument | A/B testování nákupního košíku datum | 19. listopadu 2009 snímek | 17 pro MAGNET Blancheporte
  • 18. Co dál? Vyzkoušet toto testování na Slovensku, Ukrajině • Jiné problémy a příležitosti Dále analyzovat problémy nakupujících a zpříjemnit jim cestu k objednávce • Protože víme, že se to vyplácí dokument | A/B testování nákupního košíku datum | 19. listopadu 2009 snímek | 18 pro MAGNET Blancheporte
  • 19. Uff. To je vše. Petra Kalábová Pavel Jašek Marketing specialist Konzultant MAGNET Blancheporte Dobrý web CEMOD - CZ a.s. Internet Info, s.r.o. tel.: + 420 466 040 627 tel.: + 420 277 004 656 petra.kalabova@cemod.cz pavel.jasek@dobryweb.cz www.magnet-blanche-porte.cz http://www.dobryweb.cz dokument | A/B testování nákupního košíku datum | 19. listopadu 2009 snímek | 19 pro MAGNET Blancheporte