Docs / Guider

Analys

Analys visar senaste Nudges, leverans och klick. Standardordning är recency. Du kan sortera på volym när du behöver. Flöde och Kampanjer defaultar till senaste 30 dagarna.

Vad siffrorna betyder

Skickat är accepterad leverans, inte “alla såg den”. Webbläsare kan fortfarande släppa eller fördröja en notis.
Klick är användbara. De bevisar inte att Nudgen skapade besöket. Folk som ändå skulle kommit tillbaka klickar också.
Kvalificerade besök är prenumeranter som kom och stannade: antingen låg de kvar på sidan tillräckligt länge för att läsa den, eller så öppnade de en andra sida. Det är en strängare tröskel än ett klick, och det är utfallet effektkortet bedöms på.

Jämförelsegruppen

Kortet Gav det effekt? är det enda talet på sidan som svarar på frågan de andra inte kan: skapade Nudgen besöket, eller hade besöket skett ändå. Det kan svara därför att en grupp prenumeranter medvetet inte får något.

Så byggs gruppen:

Ungefär en prenumerant av tjugo hålls undan permanent, så länge de är prenumeranter.
Varje live-utskick håller dessutom undan en lika stor grupp till, dragen för just det utskicket.
Välkomstmeddelanden och testutskick hålls aldrig undan. Ett välkomstmeddelande som aldrig kommer fram är en trasig onboarding, inte en mätning.
Målgrupper under 50 personer hålls aldrig undan. Att ta en jämförelsegrupp ur en liten lista kostar riktig räckvidd och ger ändå inget läsbart.

Ja, det betyder att en liten del av era prenumeranter hör av er mer sällan än resten. Det är priset för att lyftet är en mätning i stället för ett påstående, och det är hela skälet till att kortet får säga ”ja” högt.

Vad det troliga spannet betyder

Kortet visar andelen som besökte sajten i varje grupp, skillnaden mellan dem, och ett troligt spann runt skillnaden. Spannet är ett Newcombe-Wilson-intervall på 95 procent: den sanna effekten ligger med stor sannolikhet inuti det, och det smalnar av när fler personer mäts.

Det är spannet, inte rubriktalet, som är resultatet. Ett lyft på 4 enheter med ett spann från 1 till 7 är ett fynd. Samma 4 enheter med ett spann från -3 till 11 är brus som råkar peka uppåt just den här veckan.

Därför säger kortet att nudgarna fungerade först när hela spannet ligger över noll. Under det säger det för tidigt att säga eller ingen skillnad ännu, oavsett vad punktskattningen råkar visa. Det är inte kortet som är försiktigt med ett resultat det har. Det är kortet som vägrar rapportera ett resultat det inte har.

Varför ett påstående hålls tillbaka

Under omdömet står vad kortet fortfarande saknar: personer i jämförelsegruppen, registrerade utfall, eller prenumeranter det skickats till. Var och en har ett golv, och alla måste vara uppfyllda innan något omdöme bortom ”för tidigt” tillåts. Ett fönster som fortfarande är öppet nämns också, för en period som inte tagit slut kan röra på sig.

Det finns ingen åsidosättning för det här och ingen inställning som stänger av det. Publicera inte ett lyftpåstående från ett tunt underlag, och produkten kommer inte att räcka er ett att publicera.

Uppmätt, eller uppskattat

Två sorters tal bor på de här sidorna och de väger inte lika tungt.

Uppmätt mot jämförelsegruppen: lyftet på effektkortet, de extra besök det summerar till, och de extra avregistreringar det kostade. De har en grupp som inte fick något att jämföra med.
Modelluppskattningar: Sändpassning, poängen i kompositören för hur väl en enskild nudge passar publiken just nu, och talet ”färre avprenumerationer” på återhållsamhetskvittona. De är produktens egen bedömning av vad som troligen hade hänt. Kvittona märker churn-talet som en försiktig gissning snarare än ett uppmätt resultat, och den märkningen stämmer.

Uppskattningar är bra att besluta på. Mätningar är det man tar med sig in i ett möte. När ett tal spelar roll för någon utanför ert team, kolla först vilket av de två det är.

Flöde och kampanjer

Hemflödet och kampanjlistan är tidsavgränsade. Använd datumfönstret. Ladda mer stannar i det fönstret.