Reacties op: 9 opvallende multivariate en A/B testen uit 2007 http://www.usarchy.com/2008/01/multivariate-ab/ Mon, 30 Aug 2010 11:15:03 +0000 http://wordpress.org/?v=2.9 hourly 1 Door: 3 Recessie-proof Usability Principes - Usarchy http://www.usarchy.com/2008/01/multivariate-ab/comment-page-1/#comment-209883 3 Recessie-proof Usability Principes - Usarchy Tue, 15 Sep 2009 15:36:05 +0000 http://www.usarchy.com/2008/01/multivariate-ab/#comment-209883 [...] We hebben een systeem waarin het heel makkelijk is om een idee aan te maken. Als we weer eens een multivariate test doen, kijken we in dat systeem voor [...] [...] We hebben een systeem waarin het heel makkelijk is om een idee aan te maken. Als we weer eens een multivariate test doen, kijken we in dat systeem voor [...]

]]> Door: digitael.nl - design, usability en gebruikersvriendelijkheid » Blog Archive » Google Optimizer en Dynamische Websites http://www.usarchy.com/2008/01/multivariate-ab/comment-page-1/#comment-147690 digitael.nl - design, usability en gebruikersvriendelijkheid » Blog Archive » Google Optimizer en Dynamische Websites Sat, 06 Sep 2008 18:23:13 +0000 http://www.usarchy.com/2008/01/multivariate-ab/#comment-147690 [...] Usarchy.com staan nog een aantal opvallende A/B test resultaten. Later deze week zal ik voor de liefhebbers de Javascripts plaatsen zodat (indien je lichtgewicht [...] [...] Usarchy.com staan nog een aantal opvallende A/B test resultaten. Later deze week zal ik voor de liefhebbers de Javascripts plaatsen zodat (indien je lichtgewicht [...]

]]> Door: Gratis Website Optimalisatie gereedschap van Google http://www.usarchy.com/2008/01/multivariate-ab/comment-page-1/#comment-136458 Gratis Website Optimalisatie gereedschap van Google Sat, 19 Apr 2008 18:23:54 +0000 http://www.usarchy.com/2008/01/multivariate-ab/#comment-136458 [...] Wil je meer weten over dit soort testen, dan kun dit prima artikel lezen van Usarchy over Multivariatie en AB testen [...] [...] Wil je meer weten over dit soort testen, dan kun dit prima artikel lezen van Usarchy over Multivariatie en AB testen [...]

]]> Door: Ton Wesseling http://www.usarchy.com/2008/01/multivariate-ab/comment-page-1/#comment-135879 Ton Wesseling Tue, 15 Apr 2008 12:58:16 +0000 http://www.usarchy.com/2008/01/multivariate-ab/#comment-135879 De kennisdelingsomgeving van de WAA Nederland (Web Analytics Association) taskforce online experimenten staat sinds kort live. In deze omgeving een uitleg over a/b en mvt testing (en behavioural targeting), praktijkcases (waaronder die van de SNS Bank, maar ook KPN en Skype) en uitleg hoe te starten / implementeren. http://www.waanederland.nl/mediawiki De kennisdelingsomgeving van de WAA Nederland (Web Analytics Association) taskforce online experimenten staat sinds kort live. In deze omgeving een uitleg over a/b en mvt testing (en behavioural targeting), praktijkcases (waaronder die van de SNS Bank, maar ook KPN en Skype) en uitleg hoe te starten / implementeren.

http://www.waanederland.nl/mediawiki

]]> Door: Pieter Bezuijen http://www.usarchy.com/2008/01/multivariate-ab/comment-page-1/#comment-135878 Pieter Bezuijen Tue, 15 Apr 2008 12:48:03 +0000 http://www.usarchy.com/2008/01/multivariate-ab/#comment-135878 Erg leuk en handig artikel! Resultaten zijn echt verrassend op bepaalde vlakken. Het voorbeeld van de SNS-bank heb ik me echt over verbaasd. Leuk om eens verder mee aan de slag te gaan :-) Erg leuk en handig artikel! Resultaten zijn echt verrassend op bepaalde vlakken. Het voorbeeld van de SNS-bank heb ik me echt over verbaasd. Leuk om eens verder mee aan de slag te gaan :-)

]]> Door: Multivariate en A/B testresultaten « Interaction Design http://www.usarchy.com/2008/01/multivariate-ab/comment-page-1/#comment-130747 Multivariate en A/B testresultaten « Interaction Design Fri, 08 Feb 2008 11:27:30 +0000 http://www.usarchy.com/2008/01/multivariate-ab/#comment-130747 [...] February 8, 2008 copy from www.usarchy.com [...] [...] February 8, 2008 copy from http://www.usarchy.com [...]

]]> Door: INDERT http://www.usarchy.com/2008/01/multivariate-ab/comment-page-1/#comment-129448 INDERT Sat, 02 Feb 2008 14:00:32 +0000 http://www.usarchy.com/2008/01/multivariate-ab/#comment-129448 @ Paul Inderdaad het nadeel van A/B-testen zijn voornamelijk dat je dan je eventuele inkomsten verkleint en uitgaven vergroot in de periode dat je test en dat je dus verlies draait als de test helemaal geen positieve resultaat heeft opgeleverd. Heel frustrerend. @ Paul

Inderdaad het nadeel van A/B-testen zijn voornamelijk dat je dan je eventuele inkomsten verkleint en uitgaven vergroot in de periode dat je test en dat je dus verlies draait als de test helemaal geen positieve resultaat heeft opgeleverd. Heel frustrerend.

]]> Door: paul van oosterhout http://www.usarchy.com/2008/01/multivariate-ab/comment-page-1/#comment-123623 paul van oosterhout Sun, 20 Jan 2008 13:51:58 +0000 http://www.usarchy.com/2008/01/multivariate-ab/#comment-123623 Het nadeel van a/b testen is dat je er nooit de beste pagina mee bouwt binnen een ronde. Je kiest de beste van de 2 die je maakt. Maar hoe weet ik nu precies bij a/b testen als ik meerdere dingen laat verschillen wat nu wat veroorzaakt? Alleen door continu te testen en te verbeteren wordt je alsmaar beter. Dat is denk ik ook het punt van Mendez... Maar wellicht bereik je nooit de optimale pagina...wel een veel betere... Het nadeel van a/b testen is dat je er nooit de beste pagina mee bouwt binnen een ronde. Je kiest de beste van de 2 die je maakt. Maar hoe weet ik nu precies bij a/b testen als ik meerdere dingen laat verschillen wat nu wat veroorzaakt?

Alleen door continu te testen en te verbeteren wordt je alsmaar beter. Dat is denk ik ook het punt van Mendez…

Maar wellicht bereik je nooit de optimale pagina…wel een veel betere…

]]> Door: Remi http://www.usarchy.com/2008/01/multivariate-ab/comment-page-1/#comment-122545 Remi Fri, 18 Jan 2008 12:26:07 +0000 http://www.usarchy.com/2008/01/multivariate-ab/#comment-122545 Hey Ruben, Bedankt voor dit handige lijstje. Hoe ga jij om met Google Website Optimizer, meteen 16 varianten door elkaar testen, of eerst met 2 of 4 varianten en dan uitbouwen? Hey Ruben,
Bedankt voor dit handige lijstje.

Hoe ga jij om met Google Website Optimizer, meteen 16 varianten door elkaar testen, of eerst met 2 of 4 varianten en dan uitbouwen?

]]> Door: Erik van der Veen http://www.usarchy.com/2008/01/multivariate-ab/comment-page-1/#comment-117982 Erik van der Veen Wed, 09 Jan 2008 21:45:00 +0000 http://www.usarchy.com/2008/01/multivariate-ab/#comment-117982 Dank je, Ruben. Vind overigens ook dat je er een goed en nuttig artikel van gemaakt hebt! Heb het bovengenoemde boek van Barry Schwartz zelf ook gelezen en vind het een absolute aanrader! Dank je, Ruben. Vind overigens ook dat je er een goed en nuttig artikel van gemaakt hebt!

Heb het bovengenoemde boek van Barry Schwartz zelf ook gelezen en vind het een absolute aanrader!

]]> Door: Ruben Timmerman http://www.usarchy.com/2008/01/multivariate-ab/comment-page-1/#comment-117756 Ruben Timmerman Wed, 09 Jan 2008 11:58:14 +0000 http://www.usarchy.com/2008/01/multivariate-ab/#comment-117756 <b>Erik</b>: thanks voor de tips, en welkom hier! <b>Maarten</b>: Geen enkele, en alle. In email marketing is a/b testen nog makkelijker dan online, want je stuurt de helft van de ontvangers gewoon een andere mail. Maar je kunt dus niet zeggen dat wat hier staat, ook in e-mail werkt. Hopelijk geeft dit je inspiratie om er zelf mee te experimenteren :) Erik: thanks voor de tips, en welkom hier!

Maarten: Geen enkele, en alle. In email marketing is a/b testen nog makkelijker dan online, want je stuurt de helft van de ontvangers gewoon een andere mail. Maar je kunt dus niet zeggen dat wat hier staat, ook in e-mail werkt. Hopelijk geeft dit je inspiratie om er zelf mee te experimenteren :)

]]> Door: Ton Wesseling http://www.usarchy.com/2008/01/multivariate-ab/comment-page-1/#comment-117748 Ton Wesseling Wed, 09 Jan 2008 11:43:59 +0000 http://www.usarchy.com/2008/01/multivariate-ab/#comment-117748 Hoi Ruben. Mooie opsomming, maar er is een stuk meer gepresteerd afgelopen jaar op AB / MVT gebied (schuif eens aan bij de WAA meetings!), jammer alleen dat dat nog niet allemaal wordt gedeeld. Leuk resultaat uit een eigen case bij SNS Bank, zoals ook gepresenteerd op Emerce Insight Banking 2007 (preso pdf: http://www2.emerce.nl/insightbanking/emerceinsightbanking_snsbank.pdf video: http://www.emerce.nl/artikel.jsp?id=2023627) was dat het bleek dat een groene submit button (met witte tekst) binnen de toenmalige huisstijlomgeving van SNS Bank met 90% zekerheid op een zaterdag altijd beter converteerde dan een rode button met witte tekst, ongeacht welke van de 4 geteste tekst variaties op de button stonden. Opeen maandag echter was het verhaal precies andersom! Met 90% zekerheid converteerde daar, ongeacht de tekst, de rode button altijd beter dan de groene. Hieruit zou je kunnen concluderen dat de koper in het weekend behoefte heeft aan rust en een vriendelijke omgeving (met een beter in het toenmalige design passen call to action knop) en dat op maandag (1e werkdag) de drukte en stress ertoe noodzaakt tot een zeer duidelijke call to action knop. Je praat over conversieverschillen van wel 30%... Je pagina lijkt dus te moeten reageren op de gemoedstoestand van de bezoeker om de optimale conversie te halen :-) (uitdaging!) Je landingspagina opmerkingen zijn leuk (in tegenstelling tot wat veel bureaus nu bepleiten), maar zijn natuurlijk nooit 1 op 1 door te voeren. Idem voor bovenstaande resultaat voor SNS Bank moet je belangrijkste gedachte zijn dat je niet zelf kunt verzinnnen wat het beste converteert en dat je hier gewoon continue mee moet testen (en niet vergaderen). Resultaten van anderen zijn daarbij leuk om een richting te krijgen wat te testen, maar nooit leidend voor jouw website. Elke website heeft weer een eigen groep bezoekers met een net weer wat ander gedrag... Hoi Ruben. Mooie opsomming, maar er is een stuk meer gepresteerd afgelopen jaar op AB / MVT gebied (schuif eens aan bij de WAA meetings!), jammer alleen dat dat nog niet allemaal wordt gedeeld.

Leuk resultaat uit een eigen case bij SNS Bank, zoals ook gepresenteerd op Emerce Insight Banking 2007 (preso pdf: http://www2.emerce.nl/insightbanking/emerceinsightbanking_snsbank.pdf video: http://www.emerce.nl/artikel.jsp?id=2023627) was dat het bleek dat een groene submit button (met witte tekst) binnen de toenmalige huisstijlomgeving van SNS Bank met 90% zekerheid op een zaterdag altijd beter converteerde dan een rode button met witte tekst, ongeacht welke van de 4 geteste tekst variaties op de button stonden. Opeen maandag echter was het verhaal precies andersom! Met 90% zekerheid converteerde daar, ongeacht de tekst, de rode button altijd beter dan de groene.

Hieruit zou je kunnen concluderen dat de koper in het weekend behoefte heeft aan rust en een vriendelijke omgeving (met een beter in het toenmalige design passen call to action knop) en dat op maandag (1e werkdag) de drukte en stress ertoe noodzaakt tot een zeer duidelijke call to action knop. Je praat over conversieverschillen van wel 30%…

Je pagina lijkt dus te moeten reageren op de gemoedstoestand van de bezoeker om de optimale conversie te halen :-) (uitdaging!)

Je landingspagina opmerkingen zijn leuk (in tegenstelling tot wat veel bureaus nu bepleiten), maar zijn natuurlijk nooit 1 op 1 door te voeren. Idem voor bovenstaande resultaat voor SNS Bank moet je belangrijkste gedachte zijn dat je niet zelf kunt verzinnnen wat het beste converteert en dat je hier gewoon continue mee moet testen (en niet vergaderen). Resultaten van anderen zijn daarbij leuk om een richting te krijgen wat te testen, maar nooit leidend voor jouw website. Elke website heeft weer een eigen groep bezoekers met een net weer wat ander gedrag…

]]> Door: Maarten http://www.usarchy.com/2008/01/multivariate-ab/comment-page-1/#comment-117738 Maarten Wed, 09 Jan 2008 10:24:52 +0000 http://www.usarchy.com/2008/01/multivariate-ab/#comment-117738 Mooi stuk Ruben, Ik vraag me af of een aantal punten ook voor emailmarketing toepasbaar zijn? Iemand een gedachte hierover? Groeten, Maarten Mooi stuk Ruben,

Ik vraag me af of een aantal punten ook voor emailmarketing toepasbaar zijn? Iemand een gedachte hierover?

Groeten,

Maarten

]]> Door: Erik van der Veen http://www.usarchy.com/2008/01/multivariate-ab/comment-page-1/#comment-117726 Erik van der Veen Wed, 09 Jan 2008 08:21:50 +0000 http://www.usarchy.com/2008/01/multivariate-ab/#comment-117726 Ik heb een vermoeden dat de best scorende landingspagina (punt 5) het in Nederland niet zo goed zou doen. Denk dat het "schreeuwerige" van deze pagina meer binnen de Amerikaanse cultuur past. Ik geloof zelf niet zo in hele lange pagina's. Maar omdat de informatiebehoefte kort voor een aankoop dikwijls groot is, moeten antwoorden op eventuele vragen wel binnen handbereik zijn (via links). Bij punt 4 is het verstandig om de sitebezoekers een beetje te sturen met woorden als: aanrader, populair e.d. Daarnaast werken uitslagen uit consumententesten ook erg goed (beste koop consumentengids). Ik heb een vermoeden dat de best scorende landingspagina (punt 5) het in Nederland niet zo goed zou doen. Denk dat het “schreeuwerige” van deze pagina meer binnen de Amerikaanse cultuur past.

Ik geloof zelf niet zo in hele lange pagina’s. Maar omdat de informatiebehoefte kort voor een aankoop dikwijls groot is, moeten antwoorden op eventuele vragen wel binnen handbereik zijn (via links).

Bij punt 4 is het verstandig om de sitebezoekers een beetje te sturen met woorden als: aanrader, populair e.d. Daarnaast werken uitslagen uit consumententesten ook erg goed (beste koop consumentengids).

]]>