Fuldautomatisk nyhedsbrev med tekster fra AI

Hvis du skal have inspiration til aftensmaden, vil du så foretrække at få en plan, der er tilpasset til dine ønsker, eller en generisk plan, lavet af en madskribent?

Hos Nemlig.com tilbyder de begge dele.

Hver uge laver deres madskribent et forslag til retter, der kan indgå i ugens madplan. Planen kan findes på deres hjemmeside, og sendes til de tilmeldte på email.

Sideløbende har de en personaliseret og automatiseret madplan, der blev etableret som et AI-eksperiment i 2023, og nu vokser stille og roligt indtil den automatiserede madplan forventes at erstatte den generiske.

Den personlige madplan-mail forøger engagementet med op til 337%

Efter 4 måneders test med to mails om ugen, var resultaterne tydelige.

Den af de 3 mailvarianter, der gjorde det bedst, gav 337% flere klik fra mailen til opskriften.

Når trafikken samtidig har en konverteringsrate på over 5% så er det også en forbedring, der kan ses direkte på omsætning og indtjening.

Den personlige madplan blev lanceret i januar 2023, som et AI-eksperiment.

Eksperimentet gik i første omgang ud på, at lade AI udvælge retter, der matchede de tilmeldtes præferencer, og levere 9-12 udvalgte aftensmadsretter til alle tilmeldte to gange om ugen.

Udvælgelsen skete fra Nemlig.coms database med ca. 3.000 opskrifter, og de tilmeldte havde 9 forskellige præferencer, der kunne tilvælges og 6 forskellige, der kunne fravælges.

Efter nogle måneder stod det klart, at det ikke var optimalt, at lade AI udvælge opskrifterne:

• Ca. 2-5% af de opskrifter AI udvalgte, var ikke i databasen.
• Der blev jævnligt valgt nogle opskrifter som ikke matchede præferencerne så godt som de burde.

En af udfordringerne var, at en hel del af opskrifterne ikke havde tilstrækkelig meget metadata, der kunne fortælle om, hvor godt opskrifterne matchede præferencerne.

Der blev derfor igangsat et projekt, hvor alle opskrifter blev beriget med relevant metadata i forhold til alle præferencer. Dette arbejde blev gennemført ved hjælp af AI, men med manuel kvalitetskontrol.

Efter opdateringen af alle opskrifter med relevant metadata, blev udvælgelsen af opskrifter ændret til en regelbaseret udvælgelse i stedet for AI-baseret udvælgelse.

Samtidig med indførelse af den regelbaserede udvælgelse af opskrifterne, blev der lavet 3 forskellige varianter af den mail, der præsenterer de udvalgte opskrifter for modtagerne:

1. En statisk version, kun med fletning af op til 3 præferencer i preheadertekst.
2. En dynamisk version, med regelbaseret fletning af 3 retter i subject, samt flettefelter med præferencer i introtekst.
3. En AI-version, hvor både subject, preheader og introtekst tilpasses individuelt ud fra præferencer og retter i mailen.

Som det fremgår af billedet ovenfor med resultaterne, så klarede AI-versionen sig faktisk lidt dårligere end de to andre varianter, mens den der klarede sig bedst var variant B med de dynamiske flettetekster.

Det er vigtigt at tænke på, at de tilmeldte her får mailen to gange om ugen, så de bliver altså hurtigt klar over, hvad mailen indeholder når den kommer.

Det kan derfor ikke konkluderes at AI-genererede tekster i alle tilfælde giver dårligere resultater end tekster, der baseres på dynamiske flettefelter.

Men det kan være en påmindelse om, at AI ikke er den eneste måde at arbejde med personalisering, og at det i nogle tilfælde kan give bedre resultater at bruge alternative metoder.

Her er eksempel på variant A - Statiske tekster:

Her er eksempel på variant B - Dynamiske flettetekster:

Her er eksempel på variant C - AI-genererede tekster:

Hele løsningen er lavet i Yulsn Marketing Cloud, som også sender alle mails, og har direkte integration til OpenAI.

Medarbejderne hos Nemlig.com har selv adgang til at rette i prompts og instruktioner.

Der er fuld adgang til at kontrollere alle de AI-genererede tekster - og der blev kørt et stort antal simuleringer før lanceringen.

Og der er indbyggede Power BI dashboards, der giver overblik over resultaterne.

Der er datamæssig integration til det generelle set-up i Salesforce Marketing Cloud, men det blev valgt at lade Yulsn lave den samlede løsning, da det var langt mere effektivt end at bygge det i Salesforce.

Vil du prøve løsningen selv - så kan du tilmelde dig her