Slaget: VWO vs Optimizely

Simon Dahla

Kampen mellan jättarna

Vad är det som egentligen händer?

Visual Website Optimizer (VWO) har hamnat lite på efterkälken då de för närvarande har ett mindre bra A/B-testningsverktyg och därmed tappat kunder till Optimizely under en längre tid.

VWO har under de senaste dygnen attackerat Optimizely och pekat på vad VWO kallar en ”Major Security Issue” i Optimizely. ”Säkerhetsproblemet” som de anklagar Optimizely för anses vara det faktum att alla A/B-tester som körs på en sajt kan åskådliggöras. Läs hela storyn på VWOs blogg.

VWO har sagt att de ska släppa en ny version av sitt testverktyg inom en snar framtid. Spekulationer i huruvida detta utspel är en del i en lanseringskampanj tar alltså vid.

The Reality Check: VWO vs Optimizely

Av sakens natur kan man alltid se variationer på en sajt som A/B-testas, hur skulle annars besökarna kunna exponeras för olika variationer? Att du som besökare av en sajt exponeras för samma variant av sida, beror på den kaka som skapas av att du i första steget besöker sajten i fråga. Att få fram de olika variationerna är bara lite olika jobbigt. Det lättaste sättet är att man t.ex. kan öppna ett nytt incognito-fönster (fritt från kakor) med hemsidan i fråga tills man får upp en ny variation.

Så vad kan man se hos en sajt som kör Optimizely respektive VWO?

  • VWO har gjort det väldigt lätt att se alla A/B-tester som körs m.h.a Optimizely, de har skrivit ett plugin som gör detta åt dig. VWO mejlade ut detta till alla sina partners bara för några minuter sedan. (Se nedan).
  • Man kan se de olika variationerna med sajter som använder VWO också, det finns ett plugin även för det. (Se nedan)

Skillnaden är att i VWO kan man inte:

  • se arkiv av gamla tester,
  • inte heller A/B-tester som är inte ligger just på den sidan man är på
  • men man kan se alla variationer för respektive URL

Slutsats

Optimizely har sagt att de ska åtgärda denna ”säkerhetslucka” hyfsat omgående och det kommer förmodligen inte vara ett problem i framtiden.

Den stora frågan är om vi på Conversionista spelar VWO i händerna och faller för ett PR-knep och huruvida VWOs nya uppdatering kommer vara bättre än Optimizely’s.

Återigen, man kan alltid se de olika varianterna som körs i ett A/B-test på en sajt, det är bara olika jobbigt. Låt inte detta bli en del i ditt val av A/B-testningsverktyg eller byte av ett sådant.

Kör dessa koder för att kunna se respektive variant.

Optimizley

javascript:window.jQuery && jQuery.getScript("//dl.dropboxusercontent.com/s/ci08683w66ud4s0/optimizelyspytool.js");

VWO

javascript:var names="Combinations in test:rnrn"; if(typeof _vwo_exp_ids=="object"){for(x in _vwo_exp[_vwo_exp_ids[0]].comb_n) {names=names+x+" = "+_vwo_exp[_vwo_exp_ids[0]].comb_n[x]+"rn"; }};function readCookie(name){var nameEQ=name+"="; var ca=document.cookie.split(';'); for(var i=0;i<ca.length;i++){var c=ca[i]; while(c.charAt(0)==' ')c=c.substring(1,c.length); if(c.indexOf(nameEQ)==0)return c.substring(nameEQ.length,c.length); };return null;}; if(typeof _vis_opt_experiment_id!="undefined"){var id=_vis_opt_experiment_id; var cv=unescape(readCookie("_vis_opt_exp_"+id+"_combi")); txt=prompt(names+"rnrnChoose combination:",cv); if(txt!=null){_vis_opt_createCookie("_vis_opt_exp_"+id+"_combi",txt,100); }}else{alert("No live experiment on this page.");}; void(0);

Eller spara dessa som bookmarklet för snabbare access:

VWO-variations

Optimizley-variations

Uppdatering 2014-06-06

Mycket riktigt gjorde Optimizley igår en uppdatering där de åtgärdade ”säkerhetshålen”. Uppdateringen tillåter dig att;

  1. dölja namnen på dina A/B-test variationer
  2. möjlighet att stänga av förhandsgranskning (force variation)
  3. dölja pausade och arkiverade expriment

Alla ändringar relaterade till blogpsten är implementerade och hittas under ”Project Settings” och sedan ”Project Code Settings”. Hela bloggposten rörande detta hittas på Optimizley blogg.

Läs även