Hur gör jag ett rättvist A/B-test av RCS-text?
Ett rättvist A/B-test jämför en avgränsad ändring i likvärdiga grupper. Byter ni text, erbjudande och sändningstid samtidigt blir orsaken till skillnaden oklar.
Bestäm vad som räknas före utskicket. Om målet är bokningar ska genomförda bokningar vara huvudmåttet, inte bara klick. Redovisa räckvidd och användning av reservkanaler också. Grupper med olika leveransförutsättningar kan ge en missvisande jämförelse av själva texten.
Om både målgrupp, erbjudande och knapptext ändras samtidigt går det inte att veta vad som påverkade resultatet. Fördela likvärdiga mottagare och håll uppföljningsperioden densamma. Bestäm ett relevant mått i förväg, till exempel genomförda bokningar. Ett litet test kan ge en riktning men behöver redovisas med sin storlek och osäkerhet, inte presenteras som en allmän RCS-effekt.