POPJAM Logo
Tagasi blogisse

Prognoosi turundajana 33% rohkem müüki reklaamide kvantitatiivse testimisega

Praktiline töövoog turundajatele: tee kvantitatiivseid reklaamiteste valideeritud STSL-skooridega, määra õige valimi suurus ja kasuta platvormieksperimente valimiseks...

Prognoosi turundajana 33% rohkem müüki reklaamide kvantitatiivse testimisega

Reklaamide kvantitatiivne testimine kasutab kontrollitud katseid ja suure valimiga mõõtmist, et selgitada välja võidukas loovmaterjal enne sellele päris eelarve kulutamist. Õigesti tehtuna on see prognoosiv: Kantari Linki valideerimisuuring leidis, et lühiajalise müügi tõenäosuse kõrge skooriga reklaamid toovad tavaliselt keskmisest rohkem müüki, madala skooriga reklaamid aga vähem. See on õige esimene samm alati, kui sul on vähemalt kaks tõsiseltvõetavat loovvarianti ja piisavalt eelarvet korraliku võrdlustesti tegemiseks.


Lühidalt:

  • Reklaamide kvantitatiivne testimine toimib kõige paremini mitme loovvariandi võrdlemisel kampaaniatsükli alguses, eriti enne meediakulu käivitamist või suurendamist.
  • Kõige paremini prognoosivad platvormide sisseehitatud eksperimendid ja valimi suuruse arvutused, mis lähtuvad usaldusväärsete tulemuste tagamiseks konversioonidest, mitte klikkidest.
  • Mõõdikud, nagu valideeritud müügitõenäosuse skoorid, kaaluvad rohkem kui edevusmõõdikud ning kitsas usaldusvahemik kinnitab tegelikke tulemuste erinevusi.
  • Korralik testikavand eeldab enne käivitamist selgete hüpoteeside, minimaalse tuvastatava mõju ja fikseeritud valimi suuruse määramist, et vältida eksitavaid järeldusi.
  • Kvantitatiivsete tulemuste ühendamine kvalitatiivse järeluuringuga aitab selgitada üllatavaid tulemusi ja suunata tulevast loovmaterjalide arendamist.

POPJAM
Testi loovmaterjali enne eelarve kulutamist
POPJAM genereerib brändile vastavaid reklaamloovmaterjale ja testib enne kampaaniate avaldamist sihtrühma reaktsioone sünteetiliste ostjapersoonade abil.
Tutvu POPJAM-iga

Sisukord

Milleks reklaamide kvantitatiivset testimist tegelikult kasutatakse

Siin on asi, mida keegi sulle ei ütle, kui vaatad kolme reklaamivarianti ja lähenevat käivitustähtaega: kvantitatiivne testimine pole üks tööriist, vaid meetodite kategooria. See hõlmab avaldamiseelset loovmaterjalide valideerimist (kas tähelepanupüüdja A võidab B-d?), vormingu ja paigutuse võrdlemist (Reels või voog, staatiline või video) ning liikluse olemasolul isegi pakkumiste või maandumislehtede valikuid.

Milles see on hea: annab numbri, mitte tunde. Milles see on nõrk: selgitamises, miks üks reklaam võitis. Just sinna jäävad paljud tiimid pärast andmete saabumist kinni.

Kvantitatiivsete meetodite tugevaim põhjendus on nende prognoosivõimet toetavad tõendid. Kantari valideeritud Linki skooride uuring leidis, et STSL-i ülemisse kolmandikku kuuluvate reklaamide puhul kasvas müük pärast avaldamist sagedamini kui alumise kolmandiku puhul. See pole tühine eelis. See on erinevus mündiviske ja põhjendatud panuse vahel.

Kuhu kvantitatiivne testimine kampaania elutsüklis sobib:

  • Enne avaldamist: loovideede võrdlemine enne ühegi meediadollari kulutamist
  • Kampaania ajal: vormingu või paigutuse katsed pärast idee tõestamist
  • Pärast avaldamist: pakkumisstrateegia ja maandumislehe võrdlused võitjast suurema kasu saamiseks

Millist kvantitatiivset meetodit valida?

Iga testiküsimus ei vaja sama ülesehitust. Vale meetodi valimine raiskab eelarvet ja, mis veel hullem, tekitab põhjendamatu kindlustunde. Põhilised lähenemised on järgmised:

  1. A/B- ja võrdlustestimine. Kaks varianti, üks muutuja, jaotatud liiklus. See on lähtevalik lihtsatele küsimustele „kas X võidab Y-d?” päris reklaamiplatvormidel.
  2. Monaadiline testimine. Iga vastaja näeb küsitluspaneelis ainult üht reklaami ja hindab seda eraldi. Kasuta seda, kui soovid puhast hinnangut reklaami iseseisvale mõjule ilma võrdlusest tuleneva kallutatuseta.
  3. Järjestikune monaadiline testimine. Vastajad näevad järjest mitut reklaami, kuid hindavad igaüht nii, nagu see oleks ainus näidatud reklaam. Vastaja kohta on see tõhusam kui puhtalt monaadiline testimine, kuid järjekorra mõju on tegelik risk, mida tuleb kontrollida.
  4. Platvormi sisseehitatud eksperimendid. Google Ads Experiments ja Meta Experiments jagavad liikluse üksteist välistavatesse rühmadesse. See on oluline, sest samal platvormil käsitsi tehtud A/B-testid lasevad variantidel samal oksjonil teineteise vastu pakkuda, tõstes CPC-d ja rikkudes tulemusi.
  5. Järjestikune testimine (SPRT-tüüpi). Võimaldab tulemusi varakult vaadata statistilist kehtivust rikkumata, kuid nõuab suuremat koguvalimit ja eelmääratud peatamisreeglit. Paindlikkus saadakse valimi suuruse arvelt.

Küsitluspõhised paneelitestid tasuvad end ära enne tervikkampaaniate valmimist, kui võrdled ideid, mitte päris kampaaniatulemusi. Kui loovmaterjal on valmis ja eelarve juba liigub, annavad platvormieksperimendid päriselulise signaali, mida paneelid ei paku.

Millised mõõdikud näitavad tegelikult, kas reklaam toimib

Kõik mõõdikud ei kaalu võrdselt. Edevusnumbri käsitlemine otsustusnäitajana võib hea loovmaterjali liiga vara kõrvaldada. Eelindikaatorid (näitamised, CTR, kerimise peatamise määr, tähelepanuskoorid) näitavad, kas inimesed üldse reklaami märkavad. Tulemusmõõdikud (CVR, CPA, ROAS ja valideeritud müügitõenäosuse skoorid) näitavad, kas tähelepanu muutub konversiooniks.

Nende kahe vahe on olulisem kui kumbki eraldi. Suurepärase kerimise peatamise määra ja keskpärase CVR-iga reklaamil on tavaliselt tähelepanupüüdja probleem, mis näib sihtimisprobleemina.

Mõõdiku tüüp Mida see mõõdab Millal see on kõige olulisem
CTR Esialgne huvi ja tähelepanupüüdja tugevus Lehtri algus, vormingute testimine
Kerimise peatamise määr Tähelepanu intensiivselt keritavates voogudes Video- ja sotsiaalmeedialoovmaterjal
CVR Konversioon pärast klikki Maandumislehe ja pakkumise testimine
CPA / ROAS Konversioonide kulutõhusus Laiendamise ja eelarveotsused
STSL-tüüpi skoor Valideeritud lähiaja müügikasvu tõenäosus Avaldamiseelne loovmaterjalide valik

Just viimane rida on kaalukas. Kantari Linki andmete järgi korreleerub kõrge STSL-iga reklaam keskmisega võrreldes 33% müügikasvuga. Seetõttu lisavad üha rohkem tiime avaldamiseelsesse kontrollnimekirja valideeritud müügitõenäosuse hindamise, selle asemel et toetuda ainult CTR-ile. Kui soovid põhjalikumalt mõista loovmaterjali mõõdikute ja tulemuste seoseid, selgitab POPJAM-i loovmaterjalide tulemusanalüüsi juhend nende toimimist.

Kuidas kavandada usaldusväärne test

Enamik halbu testitulemusi ei tulene ebaõnnest, vaid halvast kavandamisest. Pane enne käivitamist paika neli asja:

  1. Määra minimaalne tuvastatav mõju (MDE). Otsusta, milline on väikseim kasv, mille põhjal tasub tegutseda. 2% CVR-i kasv võib olla oluline 50 miljoni dollari suurusel kontol, kuid 5000 dollari suurusel kontol lihtsalt müra.
  2. Sea sihiks 80% statistiline võimsus ja 95% usaldustase. Need pole juhuslikud arvud. Need on valdkonna standardsed lävendid, mis aitavad vältida juhusliku edu kuulutamist võiduks.
  3. Arvuta valimi suurus konversioonide, mitte klikkide põhjal. Väike konversioonide arv muudab väikese MDE tuvastamise ilma palju suurema eelarveta peaaegu võimatuks. CPA-le keskenduvates testides võta sihiks vähemalt 100 konversiooni variandi kohta kui praktiline alampiir.
  4. Määra kestus ja jaotus enne käivitamist, mitte pärast. 50/50 jaotus viib usaldusväärse vastuseni kõige kiiremini, kuid kampaaniatüüpide eksperimendid, näiteks Performance Max versus Shopping, vajavad sageli 6–12 nädalat, et ületada platvormi õppimisfaasid ja hooajaline müra.

Praktiline nõuanne: Kirjuta hüpotees ja lõpetamiskuupäev ühisesse dokumenti enne testi käivitamist. Halbade otsuste suurim põhjus pole matemaatika, vaid see, et tiimid muudavad poole peal meelt selle üle, mida „edu” tähendab.

Tulemuste lugemine ennast petmata

Usaldusvahemik näitab vahemikku, kuhu tegelik tulemus tõenäoliselt jääb, mitte ainult seda, kas „võitsid”. Kui CVR-i kasvu 95% usaldusvahemik ulatub −1 protsendist +8 protsendini, pole sul veel võitjat, vaid lootustandva kujuga müra.

Statistiline olulisus ja praktiline olulisus pole sama asi. Test võib saavutada 95% usaldustaseme 0,3% CVR-i paranemise puhul, mis kasumiaruannet kunagi ei mõjuta. Enne võitja kuulutamist kontrolli:

  • Kas usaldusvahemik välistab nulli ja teeb seda sisulise varuga?
  • Kas mõju suurus on sinu tegeliku eelarve juures oluline?
  • Kas test kestis terve platvormi õppimisfaasi, et varajane ebastabiilsus hinnangut ei moonutaks?
  • Kas võrdled variante sama omistamisaknaga?

Kui sul on päris võitja, laienda seda järk-järgult, selle asemel et kogu eelarve üleöö ümber jagada. Järsud kulumuutused võivad kampaania õppimisfaasi lähtestada ja märkamatult kustutada äsja tõestatud eelise.

Miks enamik reklaamiteste ebaõnnestub ja kuidas seda parandada

Enamiku kehtetute tulemuste taga on kolm viga. Esikohal on oksjonite kattumine: kahe reklaami käivitamine samal platvormil eraldi kampaaniatena laseb neil teineteise vastu pakkuda, tõstes CPC-d ja hägustades omistamist. Lahendus on platvormieksperiment või kindlad sihtrühma välistused, mitte käsitsi jaotamine.

Kolm reklaamitestimise viga ja nende lahendused

Teiseks muudavad hinnangu kehtetuks nii liiga paljude muutujate korraga testimine kui ka peatumine kohe, kui üks variant juhtima läheb. Pühendu enne käivitamist ühele muutujale ja ühele kestusele.

Kolmandaks rikuvad omistamisaknad märkamatult võrdlusi. Kui variandile A omistatakse tulemus seitsmepäevase klikiakna ja variandile B ühepäevase vaatamisakna alusel, võrdled seadeid, mitte tulemusi.

Praktiline nõuanne: Tee enne käivitamist iga variandi omistamisakna seadetest kuvatõmmis. See võtab kümme sekundit ja väldib kõige tavalisemat tagantjärele arutelu teemal „miks see test meile valetas?”.

Millal lisada kvantitatiivsetele tulemustele kvalitatiivne uuring

Kvantitatiivne test ütleb, milline reklaam võitis. Harva ütleb see, miks. Just selles lüngas jäävad paljud tiimid pärast „edukat” testi seisma, teadmata selget järgmist sammu.

Tee kvalitatiivne järeluuring siis, kui tulemus üllatab või vajad järgmise loovvooru jaoks suunda, mitte ainult punktitabelit. Kasulikud lähenemised hõlmavad järgmist:

  • Ühisvaatamise vormis test koos järelküsitlusega võitnud ideele antud reaktsioonide uurimiseks
  • Kvalitatiivset ja kvantitatiivset ühendavad uuringud, kus intervjueerid osa kõige kõrgema või madalama hinnangu andnud kvantitatiivse uuringu vastajatest
  • Diagnostilised küsimused, näiteks „Mis oleks sind peaaegu selle vaatamisest loobuma pannud?”, üldiste rahuloluhinnangute asemel

Järeluuringu leiud saavad järgmiseks kvantitatiivseks hüpoteesiks. Just sellist ringi kirjeldab Ipsos oma eeltestimismeetodite ühendamist käsitlevas töös.

Praktiku kontrollnimekiri, mida tasub käepärast hoida

Kui jätad meelde ühe asja, siis selle: vali üks hüpotees, arvuta valimi suurus enne käivitamist, kasuta oksjonite kattumise vältimiseks platvormieksperimente ja ära kuuluta võitjat enne, kui usaldusvahemik välistab nulli sisulise varuga. Kõik muu on üksikasjad.

Doruk

Kuidas POPJAM sinu testimistöövoogu sobib

Kui sinu kitsaskoht on üldse piisava hulga päris loovvariantide tootmine testimiseks, siis just selle lünga täitmiseks POPJAM loodigi. Selle asemel et oodata nädalaid, kuni disainitiim teeb kolm tähelepanupüüdja variatsiooni, genereerib POPJAM brändile vastavad reklaamloovmaterjalid ja testib neid sünteetiliste ostjapersoonade peal enne esimese dollari jõudmist oksjonile.

POPJAM

Nii saad suunava hinnangu sellele, millised ideed tasub päris platvormieksperimenti viia, enne kui kulutad eelarvet selle päris kampaanias väljaselgitamiseks. See ei asenda eespool kirjeldatud statistilist rangust, vaid annab sellele sisendi: kiirem variantide tootmine, varasem signaal ja vähem raisatud testikohti ideedele, millel polnud võiduvõimalust. Kui valmistad järgmist loovmaterjalide vooru Meta, Google'i või TikToki jaoks, proovi AI-reklaamigeneraatorit ja tee esimene sünteetilise persoona test enne järgmist käivituskuupäeva.

Allikad

Korduma kippuvad küsimused

Mida tähendab reklaamide testimine?

Reklaamide testimine tähendab reklaamivariantide süstemaatilist võrdlemist kontrollitud katsete või paneelipõhiste küsitluste abil, et mõõta enne päris kampaaniat või selle ajal, milline variant saavutab kindla mõõdiku järgi parema tulemuse.

Millised on peamised reklaamide kvantitatiivse testimise meetodid?

Põhimeetodid on A/B- ja võrdlustestimine, monaadiline testimine, järjestikune monaadiline testimine, platvormide sisseehitatud eksperimendid ning järjestikune statistiline testimine (SPRT-tüüpi). Igaüks sobib kampaania elutsükli eri etappidesse.

Mis vahe on reklaamide kvalitatiivsel ja kvantitatiivsel testimisel?

Kvantitatiivne testimine mõõdab suurtes valimites arvulisi tulemusi, nagu CTR, CVR ja valideeritud müügitõenäosus. Kvalitatiivne testimine kogub väiksematelt rühmadelt avatud vastuseid, et selgitada, miks reklaam just selliselt toimib.

Kui palju reklaamide testimine maksab?

Kulu sõltub peamiselt minimaalse tuvastatava mõju jaoks vajalikust valimi suurusest. CPA-le keskenduvates testides soovitatud vähemalt 100 konversiooni variandi kohta saavutamine võib tähendada märkimisväärset meediakulu enne tulemuste usaldusväärseks muutumist. Seetõttu aitab loovideede avaldamiseelne valideerimine näiteks POPJAM-iga vähendada raisatud testimiseelarvet.