Alla tester är inte jämlika
Jag gillar tester. Både multivariata och A/B-test (eller A/B/C-test). Det är dock viktigt att fundera på vad som ska testas. Det är viktigt med mål och hypotes.
Exempel på mindre bra A/B/C-test (offline):
Test 1 (som regeringen skulle kunna genomföra):
Hypotes: Sänkt skatt skulle leda till ökad konsumtion jämfört med status quo och skattehöjningar.
Original (a): Oförändrad skatt
Variant 1 (b): 50 % skattehöjning
Variant 2 (c): 50 % skattesänkning
Utsätt 1/3 av befolkningen för respektive variant. Slumpa.
Test 2 (som LO skulle kunna genomföra, ”blamestorming”):
Hypotes: Det är mer effektivt att skylla på Christer Elmehagen jämfört med att stoppa huvudet i sanden eller att skylla på Wanja Lundby-Wedin.
Original (a): Stoppa huvudet i sanden
Variant 1 (b): Skyll på Wanja Lundby-Wedin
Variant 2 (c): Skyll på Christer Elmehagen
Blir den tredjedel som exponeras för variant c mer positivt inställda till LO än övriga grupper?
Test 3 (som Ipred-kramare eller Ipred-hatare skulle kunna genomföra):
Hypotes: Det är större risk för de som delar med sig av Jan Guillous böcker att drabbas av krav på skadestånd.
Original (a): Fildelar inte alls (bidrar till nedgången i Internet-trafiken)
Variant 1 (b): Delar med sig av Jan Guillous ljudböcker.
Variant 2 (c): Delar med sig av Liza Marklunds böcker.
Slutsatsen är att det är viktigt att noga tänka igenom vad som testas och varför det testas. Det finns tester som inte bör genomföras. Det testas för lite i allmänhet, men det är rätt saker som ska testas.
Vad skulle du vilja testa?
