PIE sistēma: kā prioritizēt galvenās lapas testus ar ierobežotu datplūsmu

Kopsavilkums

A/B testu veikšana galvenajā lapā ar ierobežotu datplūsmu ir neapmierinoša. Jūs tērējat nedēļas testiem, kas nekad nesasniedz nozīmīgumu vai arī maina nelielus elementus ar mazu ietekmi. Risinājums ir prioritizācijas sistēma, piemēram, PIE (Potential, Importance, Ease), kas vērtē katru testa ideju, lai jūs koncentrētu savu datplūsmu uz izmaiņām, kas visticamāk palielinās konversijas. Šis raksts jūs soli pa solim iepazīstina ar savu testu vērtēšanu, izmantojot reālus piemērus, izskaidro, kā noteikt minimālo izlases lielumu ar bezmaksas kalkulatoru, un atklāj izplatītas kļūdas, kas nogalina zemas datplūsmas eksperimentus. Beigās jums būs atkārtojams process, kā pārvērst katru apmeklētāju par datu punktu, kas skaitās, nevis zaudēta iespēja.

Kad jūsu galvenā lapa mēnesī saņem tikai dažus tūkstošus apmeklētāju, tradicionālā A/B testēšana šķiet kā greznība. Jūs veicat testu par pogas krāsu, gaidāt trīs nedēļas, un rezultāts ir nenoteikts. Vai vēl ļaunāk, jūs nekad nesākat, jo esat paralizēts izvēles dēļ. Patiesā problēma nav pati testēšana — tā ir zināšana, ko vispirms testēt. Ar ierobežotu datplūsmu katram testam ir jābūt nozīmīgam. Iepazīstieties ar PIE sistēmu, vienkāršu vērtēšanas sistēmu, ko izmanto konversijas optimizācijas profesionāļi, lai sarindotu eksperimentus pēc Potenciāla, Svarīguma un Viegliuma. Šis raksts sniedz soli pa solim procesu, lai prioritizētu testus, aprēķinātu izlases lielumus un izvairītos no viltus pozitīviem rezultātiem, lai jūs varētu uzlabot konversijas pat ar nelielu datplūsmu.

Kāpēc lielākā daļa zemas datplūsmas testu neizdodas

Pirms ienirstam prioritizācijā, saprotiet ienaidnieku: statistiskais nenozīmīgums. Ja jūsu galvenā lapa mēnesī saņem 1 000 apmeklētāju un jūs testējat nelielu izmaiņu — piemēram, nomainot atsauksmes attēlu —, jums būtu vajadzīgas nedēļas vai mēneši, lai noteiktu jēgpilnu atšķirību. Tikmēr jūs nokavējat iespēju testēt augstas ietekmes elementus, piemēram, virsrakstu vai aicinājumu uz darbību (CTA).

Tāpēc jums ir nepieciešama sistēma, kas liek jums jau iepriekš novērtēt ietekmi. PIE sistēmu popularizēja Widerfunnel, un tā darbojas šādi: katrai testa idejai piešķiriet vērtējumus skalā no 1 līdz 10 trim faktoriem:

• Potenciāls – Cik daudz vietas uzlabojumiem ir? (10 = šis elements ir acīmredzami bojāts)
• Svarīgums – Cik bieži apmeklētāji redz šo elementu? (10 = katrs apmeklētājs, lapas augšdaļā)
• Viegliums – Cik viegli testu īstenot? (10 = mainīt vienu teksta rindiņu)

Reiziniet (P × I × V), lai iegūtu kopējo punktu skaitu. Vispirms testējiet idejas ar augstāko punktu skaitu.

1. solis: ātra galvenās lapas audits ātrajiem uzlabojumiem

Sāciet ar ātru galvenās lapas auditu. Identificējiet elementus, kas ir pretrunā labākajai praksei: vājš virsraksts, pārāk daudz veidlapas lauku vai trūkstošs vērtības piedāvājums. Šeit noder 10 minūšu konversijas audits. Meklējiet acīmredzamus berzes punktus, piemēram, mulsinošu tekstu vai apraktu CTA. Tie ir jūsu augsta potenciāla kandidāti.

Piemēram, ja jūsu virsraksts saka "Laipni lūdzam mūsu vietnē", nevis ieguvumus aprakstošu apgalvojumu, tas ir 9 par Potenciālu (milzīga vieta), 10 par Svarīgumu (visi to redz), un varbūt 8 par Viegliumu (teksta rediģēšana ir vienkārša). Punkti = 9×10×8 = 720. Salīdziniet ar sekundārās pogas krāsas testēšanu, ko redz 10% apmeklētāju: Potenciāls 3, Svarīgums 3, Viegliums 7 → 63. Virsraksta tests uzvar.

2. solis: prioritizēšana ar PIE punktiem praksē

Pielietosim PIE diviem izplatītiem galvenās lapas testiem. Pirmkārt, veidlapas lauku samazināšana no 6 uz 3. Potenciāls: 8 (īsākas veidlapas bieži konvertē labāk), Svarīgums: 10 (katrs kvalificēts apmeklētājs redz veidlapu), Viegliums: 6 (nepieciešamas izmaiņas aizmugursistēmā). Punkti = 8×10×6 = 480. Otrkārt, atpakaļskaitīšanas taimera pievienošana steidzamībai. Potenciāls: 5 (darbojas noteiktai auditorijai), Svarīgums: 8 (redz lielākā daļa), Viegliums: 4 (pielāgota izstrāde). Punkti = 5×8×4 = 160. Jūs vispirms testētu veidlapu.

Izplatīta kļūda ir testēt pārāk daudz ideju vienlaikus, kas sadrumstalo jūsu datplūsmu. Pieturieties pie viena augsta punktu skaita testa vienā reizē. Un, ja jūsu lapai jau ir skaidrs vērtības piedāvājums, apsveriet sociālās pierādījuma izvietojuma testēšanu — bet vispirms izvērtējiet to caur PIE.

Ja jūsu galvenā lapa cieš no pārāk daudz izvēļu, PIE punkti par opciju vienkāršošanu būs augsti, jo izvēles samazināšana tieši samazina kognitīvo slodzi, kas ir pierādīts konversijas veicinātājs.

3. solis: aprēķiniet nepieciešamo izlases lielumu pirms palaišanas

Pat augstas prioritātes tests neizdodas, ja to neveicat pietiekami ilgi. Galvenajai lapai ar 2 000 mēneša apmeklētājiem un bāzes konversijas līmeni 3%, lai noteiktu 25% relatīvo uzlabojumu (līdz 3,75%), ir nepieciešami aptuveni 50 000 apmeklētāju uz variantu pie 80% jaudas — tas ir 25 mēnešu datplūsma. Tas ir nereāli. Tāpēc jums ir divas iespējas:

• Testēt tikai tādas izmaiņas, kurām sagaidāt lielu efektu (piem., dubultot konversijas līmeni).
• Izmantot Bajesa metodes, kas var sniegt atziņas ātrāk, lai gan tās prasa lielāku statistisko sarežģītību.

Praktiska alternatīva: izmantojiet bezmaksas tiešsaistes izlases lieluma kalkulatorus (piem., no Optimizely vai VWO) un iestatiet minimālo nosakāmo efektu 50% vai augstāku. Tas atbilst jūsu datplūsmai. Piemēram, ar tiem pašiem 2 000 mēneša apmeklētājiem un bāzes līmeni 3%, lai noteiktu 50% pieaugumu (līdz 4,5%), ir nepieciešami aptuveni 8 000 apmeklētāju uz variantu — aptuveni 4 mēneši. Tas ir ilgi, bet iespējams, ja esat pacietīgs. Ja nevarat gaidīt tik ilgi, apsveriet kvalitatīvo testēšanu (lietojamības testus, karstuma kartes) kā papildinājumu.

4. solis: apstipriniet rezultātus ar aizturi un veiciet iteratīvos testus

Kad jūsu tests sasniedz nozīmīgumu, nepasludiniet uzvaru uzreiz. Palaidiet uzvarējušo variantu vienu pilnu nedēļu pēc nozīmīguma, lai nodrošinātu, ka nav sezonālu noviržu. Pēc tam ieviesiet to un pārejiet pie nākamās augstākā PIE punktu idejas. Šis iteratīvais process veicina pieaugumu.

Brīdinājums: izvairieties no vairāku salīdzinājumu kļūmēm. Ja testējat trīs variantus pret kontroli, izmantojiet korekciju, piemēram, Bonferroni, vai paļaujieties uz Bajesa varbūtību. Arī nekad neskatieties rezultātus katru dienu un neapstājieties agri — tas palielina viltus pozitīvos. Iestatiet minimālo darbības laiku vismaz divas nedēļas neatkarīgi no datplūsmas.

Reāls piemērs: B2B SaaS galvenā lapa

B2B SaaS klientam bija 1 500 mēneša apmeklētāju un 2% demonstrācijas pieprasījumu līmenis. Viņu PIE vērtējumi:

• Virsraksta pārrakstīšana: 9×10×8 = 720
• CTA pogas teksts: 7×10×9 = 630
• Sociālās pierādījuma logotipu joslas pievienošana: 6×9×7 = 378
• Galvenā attēla maiņa: 5×8×5 = 200
• Veidlapas lauku samazināšana no 5 uz 3: 8×10×5 = 400 (viņu CRM padarīja lauku noņemšanu sarežģītu, tāpēc Viegliums zems)

Viņi vispirms testēja virsrakstu. Pēc 8 nedēļām variants ar uz klienta rezultātiem vērstu virsrakstu palielināja konversijas par 34% (no 2% uz 2,68%). Rezultāts bija statistiski nozīmīgs. Pēc tam viņi testēja CTA tekstu un ieguva vēl 12% pieaugumu. Sešu mēnešu laikā viņu konversijas līmenis dubultojās — pilnībā pateicoties augstas ietekmes testu prioritizēšanai.

Bieži sastopamās kļūdas, no kurām izvairīties

• Pārāk daudzu lietu testēšana vienlaikus: Katrs tests patērē datplūsmu. Koncentrējieties uz vienu ideju, līdz iegūstat uzvarētāju.
• Viegliuma izvēle potenciāla vietā: Ir kārdinoši testēt vienkāršāko izmaiņu (piem., pogas krāsu), jo tas ir ātri. Bet tam bieži ir zems potenciāls. Vienmēr vispirms vērtējiet.
• Kvalitatīvo datu ignorēšana: Pirms testa palaišanas noskatieties sesiju ierakstus vai karstuma kartes. Tie var atklāt, ar kuriem elementiem lietotājiem ir grūtības, dodot jums hipotēzi. Raksts par konversijas noplūdi izskaidro, kā pamanīt šīs problēmas.

Secinājums

Ierobežota datplūsma nenozīmē, ka nevarat uzlabot savu galveno lapu. Tas nozīmē, ka jums jābūt nežēlīgi izvēlīgiem attiecībā uz to, kurus testus veicat. PIE sistēma sniedz strukturētu veidu, kā izvēlēties uzvarētājus, pirms ieguldāt laiku un datplūsmu. Sāciet ar ātru auditu, novērtējiet savas testa idejas, aprēķiniet nepieciešamos izlases lielumus un apņemieties veikt katru testu līdz beigām. Laika gaitā šī disciplīna pārvērtīs jūsu galveno lapu par konversijas mašīnu — vienu apstiprinātu uzlabojumu pēc otra. Ja jums nepieciešams ātrāks veids, kā izveidot galvenās lapas variantus testēšanai, apsveriet rīka izmantošanu, kas ģenerē lapas no vienkārša teksta, ļaujot jums koncentrēties uz testu, nevis izveidi.