A/B testování pro MAGNET Blancheporte - Pavel Jašek, Petra Kalábová
1. A/B testování pro MAGNET Blancheporte
Petra Kalábová & Pavel Jašek. Klub WebTop100 19. listopadu 2009
2. O čem budeme povídat
1. MAGNET Blancheporte
2. Výchozí situace
3. Co se testovalo
4. Co předcházelo testování
5. Postup testování
6. Vyhodnocení
7. Co dál?
dokument | A/B testování nákupního košíku datum | 19. listopadu 2009 snímek | 2
pro MAGNET Blancheporte
3. MAGNET Blancheporte
• Zabýváme se zásilkovým obchodem v Čechách, na
Slovensku a na Ukrajině
• Nabízíme elegantní francouzskou módu, dekorace
a doplňky do domácnosti
• Na českém trhu působíme již od roku 1967
• Jsme součástí nadnárodní společnosti 3Suisses
International
• Cílová skupina na internetu: ženy 47+
• Noví zákazníci mají největší problém s kódem
výhody
dokument | A/B testování nákupního košíku datum | 19. listopadu 2009 snímek | 3
pro MAGNET Blancheporte
4. Výchozí situace
• Velký dotazník → upřesnily se cílové skupiny
• Jak jim pomoci → vylepšení použitelnosti
• Brainstorming v DW (Adam+Pavel)
o Google Analytics
o Expertní názor Adama
• Schůzka s Dobrým webem
o Diskuse problémových míst
o Co lze řešit (vs. technické schopnosti e-shopu;
vs. plány MBP)
o Důležitost, prioritizace
o Doporučení testování
dokument | A/B testování nákupního košíku datum | 19. listopadu 2009 snímek | 4
pro MAGNET Blancheporte
6. A/B Testování nákupního košíku
Co lze testovat
• Výzvy k akcím + rozložení
Co a jak nelze testovat
• Moc věcí najednou
dokument | A/B testování nákupního košíku datum | 19. listopadu 2009 snímek | 6
pro MAGNET Blancheporte
7. Co předcházelo testování
• Malá zkušební verze. Jaké mohou být problémy?
dokument | A/B testování nákupního košíku datum | 19. listopadu 2009 snímek | 7
pro MAGNET Blancheporte
8. Co předcházelo testování
Odhad doby testování
• http://abtester.com/calculator/
Metriky + odhadové hodnoty
• Procento dokončení objednávacího procesu
• Vědět o možných problémech výpočtu (jiná
cesta uživatele)
dokument | A/B testování nákupního košíku datum | 19. listopadu 2009 snímek | 8
pro MAGNET Blancheporte
9. Postup testování: Cíle
1. Vylepšit použitelnost → větší tržby
2. Vyzkoušet vůbec testování jako takové
3. Je odhad vylepšení reálný?
» Testování může (a občas i musí) dopadnout špatně
dokument | A/B testování nákupního košíku datum | 19. listopadu 2009 snímek | 9
pro MAGNET Blancheporte
10. Problémy testování, o kterých se ví
• Sezónní vlivy + externí faktory (emailové
kampaně)
• Mnoho změn najednou může škodit
• Segmentace vs. technické řešení
dokument | A/B testování nákupního košíku datum | 19. listopadu 2009 snímek | 10
pro MAGNET Blancheporte
11. Harmonogram
• Zúčastněné
strany
» Zodpovědnost
» kontroly
• Reálné, spíše
pesimistické
odhady
dokument | A/B testování nákupního košíku datum | 19. listopadu 2009 snímek | 11
pro MAGNET Blancheporte
15. Testování testování
Nepodcenit vyzkoušení, zda to všechno
funguje
• Programátoři to mohli nasadit špatně
• Mohly přijít špatné instrukce z Dobrého webu
• Neměřilo by to správně
• Mohlo by to mást návštěvníky → zbytečně by
se ztrácely peníze
dokument | A/B testování nákupního košíku datum | 19. listopadu 2009 snímek | 15
pro MAGNET Blancheporte
16. Průběžné sledování
• Statistické zpřesňování
• Zlepšení oproti původní variantě se
pohybovalo od 5 do 30 %
dokument | A/B testování nákupního košíku datum | 19. listopadu 2009 snímek | 16
pro MAGNET Blancheporte
17. Vyhodnocení
Počet návštěvníků v experimentu
• v každé verzi přes 3500
Přínosy pro Magnet Blancheporte
Ani to tak nebolelo
• rychlá návratnost
• jednoduchá implementace
• poznání procesu testování
dokument | A/B testování nákupního košíku datum | 19. listopadu 2009 snímek | 17
pro MAGNET Blancheporte
18. Co dál?
Vyzkoušet toto testování na Slovensku,
Ukrajině
• Jiné problémy a příležitosti
Dále analyzovat problémy nakupujících a
zpříjemnit jim cestu k objednávce
• Protože víme, že se to vyplácí
dokument | A/B testování nákupního košíku datum | 19. listopadu 2009 snímek | 18
pro MAGNET Blancheporte
19. Uff. To je vše.
Petra Kalábová Pavel Jašek
Marketing specialist Konzultant
MAGNET Blancheporte Dobrý web
CEMOD - CZ a.s. Internet Info, s.r.o.
tel.: + 420 466 040 627 tel.: + 420 277 004 656
petra.kalabova@cemod.cz pavel.jasek@dobryweb.cz
www.magnet-blanche-porte.cz http://www.dobryweb.cz
dokument | A/B testování nákupního košíku datum | 19. listopadu 2009 snímek | 19
pro MAGNET Blancheporte