Fakta o A/B testování a CRO


„Vím, že polovina peněz za inzerci je promrhaná, jen nevím, která polovina“
— John Wanamaker, americký podnikatel a „pionýr marketingu“


A/B testování a CRO celkově: Statistiky o A/B testování a CRO celosvětově  •  Konkrétní techniky CRO

A/B testování a CRO konkétních webů: A/B testování velkých webů  •  Výsledky A/B testování velkých webů  •  Důsledky absence A/B testování ;

A/B testování a CRO Increveru: Výsledky A/B testů webů Increveru  •  Celkové statistiky Increveru



Statistiky o A/B testování a CRO celosvětově


71 % firem provádí 2 či více A/B testů měsíčně

Zdroj: Invesp (invespcro.com/blog/the-state-of-ab-testing/)

Jen 1 ze 7–8 A/B testů přinese významný (a statisticky spolehlivý) nárůst konverzního poměru

Zdroj: Invesp (invespcro.com/blog/the-state-of-ab-testing/); VWO (i.pinimg.com/564x/03/6d/6d/036d6d98dac752d24f95f1518098f3f1.jpg)

Pouze 10—20 % A/B testů, které provede Google a Bing.com, přinese pozitivní výsledky

Zdroj: Harvard Business Review (hbr.org/2017/09/the-surprising-power-of-online-experiments)

A/B testování je nejpopulárnější formou optimalizace konverzí, využívá ho na 56 % marketérů

Zdroj: SessionCam (sessioncam.com/20-conversion-rate-optimization-stats-you-need-to-know/)

7 z 10 marketérů využívá výsledků z CRO pro další marketingové účely vč. offlinu

Zdroj: SessionCam (sessioncam.com/20-conversion-rate-optimization-stats-you-need-to-know/); Adept (blog.adeptmarketing.com/the-ultimate-list-of-conversion-rate-optimization-and-ab-testing-statistics/)

Zhruba 20 % malých změn webu způsobí statisticky významný dopad, zatímco v případě velkých změn webu tomu je u 33 % z nich

Zdroj: Experiment Engine (blog.sessioncam.com/20-conversion-rate-optimization-stats-you-need-to-know-3226df1d1ef1)

Firmy investují v průměru do CRO nástrojů na (v přepočtu) 44.000 Kč měsíčně

Zdroj: Forbes (forbes.com/sites/danielnewman/2015/05/06/conversion-rate-optimization-which-tools-are-best/#1c4523e94afb); SessionCam blog.sessioncam.com/20-conversion-rate-optimization-stats-you-need-to-know-3226df1d1ef1)


Konkrétní techniky CRO


Up-sell funguje na webu 20× lépe, než cross-sell

Zdroj: vIlinčev (ilincev.com/upsell-a-cross-sell)


A/B testování velkých webů


Amazon.com, Booking.com, Facebook a Google provádí každý rok více než 10.000 A/B testů

Zdroj: Harvard Business Review (hbr.org/2017/09/the-surprising-power-of-online-experiments)

Booking.com provádí neustále na 1000 souběžných A/B testů (což představuje více variant webu, než je množství lidí, kteří kdy žili)

Zdroj: Taplytics (taplytics.com/blog/how-booking-comss-tests-like-nobodys-business)

Airbnb.com provádí neustále na 500 souběžných A/B testů a posuzuje na 2.500 metrik; přičemž celkově sleduje zhruba 50.000 kombinací A/B testů a metrik

Platné ke květnu 2017
Zdroj: Medium (medium.com/airbnb-engineering/https-medium-com-jonathan-parks-scaling-erf-23fd17c91166)

Vyhledávač Bing.com provádí neustále zpravidla přes 250 souběžných A/B testů

Zdroj: Quora (quora.com/Which-companies-do-a-lot-of-AB-testing/answer/Mike-St-Laurent-2?srid=oCjC)

Facebook A/B testoval nejméně 72 variant navigační lišty jen v roce 2017

Zdroj: The Newt Web (thenextweb.com/apps/2017/10/19/a-designer-has-collected-at-least-66-active-versions-of-facebook-apps-navbar/); (docs.google.com/document/d/19BoeoynEBtk0lQZREyrhHHemaMT9zP3CZL31xr6Xtvs/edit)

Google provedl více než 7000 A/B testů svého vyhledávacího algoritmu v roce 2011

Zdroj: Unbounce (unbounce.com/conversion-rate-optimization/conversion-landing-page-ab-testing-stats/); Pardot (pardot.com/blog/abcs-ab-testing/)

Gmail testoval 50 odstínů modré barvy pro své klíčové tlačítko (CTA), aby nalezl nejlépe konvertující odstín

Zdroj: Quicksprout (quicksprout.com/2013/03/14/click-here-11-ways-to-improve-your-call-to-actions/)

V Microsoftu z A/B testů přibližně 1/3 skončí pozitivně, 1/3 skončí neutrálně a 1/3 skončí s negativními výsledky

Zdroj: Harvard Business Review (hbr.org/2017/09/the-surprising-power-of-online-experiments)

V Microsoftu na A/B testování pracuje přes 80 lidí, kteří každý den provádějí stovky A/B testů na různých produktech, jako jsou Bing, Cortana, Exchange, MSN, Office, Skype, Windows či Xbox

Platné k září 2017
Zdroj: Harvard Business Review (hbr.org/2017/09/the-surprising-power-of-online-experiments)


Výsledky A/B testování velkých webů


Barack Obama získal díky A/B testování navíc (v přepočtu) 1,3 miliardy Kč a 288 tisíc dobrovolníků během své prezidentské kampaně v roce 2008

Zdroj: Power Digital Marketing (blog.powerdigitalmarketing.com/cro/9-cro-facts-that-will-convince-you-to-use-it); Optimizely (blog.optimizely.com/2010/11/29/how-obama-raised-60-million-by-running-a-simple-experiment/)

Barack Obama díky zhruba 500 A/B testům, provedených během 20 měsíců jeho prezidentské kampaně v r. 2012, zvýšil množství finančních darů o +49 % a počet registrovaných uživatelů o +161 %

Zdroj: Kyle Rush (kylerush.net/blog/optimization-at-the-obama-campaign-ab-testing/)

Amazon.com zvýšil změnou tlačítka „Registrovat“ roční tržby o (v přepočtu) 6,5 miliard Kč

User Interface Ingineering (articles.uie.com/three_hund_million_button/)

Aplikace Tinder zvýšila A/B testováním fotek uživatelů počet „shod“ (angl. „matches“) o +12 %

Zdroj: Mashable (mashable.com/2016/10/13/tinder-smart-photos/#KQraTUGmUkqS); GoTinder.com (blog.gotinder.com/introducing-smart-photos-for-the-most-swipeworthy-you/)

Google testoval 41 odstínů modré barvy odkazů, což mu přineslo nárůst tržeb ve výši (v přepočtu) 4,3 miliardy Kč ročně

Zdroj: New York Times (nytimes.com/2009/03/01/business/01marissa.html?pagewanted=print); DesignersAndGeekseeks.com (designersandgeeks.com/events/using-ab-testing-to-inform-design)

Videoplatforma Netflix pomocí více než 150 malých A/B testů v roce 2015 zvýšila počet zhlédnutí videí o +20–30 %

Zdroj: Variety (variety.com/2016/digital/news/netflix-ab-tests-image-optimization-trick-1201674325/)

Portál na mikropráce Fiverr zvýšil díky více než 400 A/B testům za 10 měsíců počet registrací uživatelů o +457 %

Zdroj: Unbounce (unbounce.com/campaign-strategy/how-fiverr-conquered-conversion/)

Web The Guardian zvýšil o +46 % počet nových odběratelů díky A/B testování stránky pro objednání předplatného

Zdroj: Optimizely (optimizely.com/customers/theguardian/)

Vyhledávač Bing.com díky A/B testu drobné změny (zobrazení nadpisů reklam) zvýšil tržby o +12 %, což představuje nárůst o více než (v přepočtu) 2,2 miliardy Kč ročně jen v USA

Údaj o výši ročních příjmů je k r. 2012
Zdroj: Harvard Business Review (hbr.org/2017/09/the-surprising-power-of-online-experiments)

Vyhledávač Bing.com díky A/B testování zvyšuje každoročně tržby z vyhledávání o 10–25 %, pomocí ověřování malých změn, z nichž desítky úspěšných každý měsíc nasazuje trvale na web

Platné k r. 2017
Zdroj: Harvard Business Review (hbr.org/2017/09/the-surprising-power-of-online-experiments)

E-mail Hotmail A/B testováním zvýšil o +9 % otevření e-mailové schránky z titulky MSN.com díky tomu, že se schránka začala otevírat na nové kartě prohlížeče, namísto v té samé

Zdroj: Harvard Business Review (hbr.org/2017/09/the-surprising-power-of-online-experiments)


Důsledky absence A/B testování

Redesign e-shopu Marks & Spencer za 5 miliard korun snížil tržby o -8 % (…Tip Týmu Increveru k nezaplacení: „poučte se z chyb druhých a vždy A/B testujte změny webu, a redesign obzvlášť“ ;-) )

Zdroj: Ilincev (ilincev.com/jak-minimalizovat-rizika-redesignu-webu)


Výsledky A/B testů Increveru


Letenkový server zaletsi.cz zvýšil o +21 % rezervace letenek díky chytré úpravě hlavičky webu


Magazín RychlýAuta.cz zvýšil o +20 % sdílení příspěvků na Facebooku díky přetextování sdílecího tlačítka


Web Strany svobodných občanů zvýšil o +59 % proklikovost na formulář pro finanční dary díky vylepšení textu a barvy tlačítka „PŘISPĚT“


Magazín JenŽeny.cz.cz zvýšil o +4,1 % imprese reklam díky jejich přebarvení



Celkové statistiky Increveru

Increver otestoval již přes 14,2 milionu uživatelů (z desítek zemí světa, hovořících 10 různými jazyky) pomocí více než 642 A/B testů

Platné ke květnu 2018

Průměrné ROI (návratnost investice) do Increveru je ~2200 %

Platné k prosinci 2017 (počítáno dle posledních 4 kampaní, s využitím odhadů některých metrik, založených na údajích, typických pro daný segment trhu; skutečná částka se proto může lišit → kontaktujte Tým Increveru a nechte si zpracovat odhad ROI na míru Vašemu projektu)

Chci A/B testovat svůj web a zvýšit své tržby