A/B-test - Products AI bewijst zijn kracht met 66% meer klikken en +14% CTR

De uitdaging: CTR verbeteren en betere prestaties leveren.

Het belangrijkste doel van Elevate was om te chatten door producttitels beter af te stemmen op zoektermen van gebruikers, wat uiteindelijk tot betere prestaties zou leiden.

Aanpak: A/B-test

Om de effectiviteit van Products AI te evalueren, voerde Elevate een A/B-test uit. Het primaire doel was om de impact te meten van AI-geoptimaliseerde producttitels op modeartikelen, een categorie waar de voorkeuren van klanten sterk worden beïnvloed door zoekrelevantie en trends.

Om de nauwkeurigheid van deze test te garanderen, selecteerden ze producten die vergelijkbaar waren qua type, prijsklasse en historische prestaties. De producten werden in twee groepen verdeeld:

• Een testgroep (50% van de modeproducten)
• Een controlegroep (de resterende 50%)

‍

Beide groepen werden gebalanceerd op basis van belangrijke prestatiecijfers, waaronder klikken, vertoningen en CTR. Daarnaast hield Elevate rekening met productprijzen en het aantal producten dat in de uitverkoop ging tijdens piekseizoenen.

De test was zo gestructureerd dat het effect van AI-geoptimaliseerde eigenschappen op de testgroep werd geïsoleerd terwijl de controlegroep onaangeroerd bleef voor vergelijking, zodat een duidelijke en betrouwbare vergelijking mogelijk was.

Implementatie

Nadat ze alle producten hadden geselecteerd die ze wilden optimaliseren, pasten ze de verschillende optimalisatie-instellingen aan, waaronder:

• Sjabloon: Kleding
• Taal: Nederlands
• AI-Creativiteit: Creativiteitscontrole werd ingesteld op een gemiddeld niveau om originaliteit in evenwicht te brengen met relevantie.
• Prompt op maat: De AI werd geconfigureerd om zoveel mogelijk trending trefwoorden op te nemen in de producttitels, in lijn met het huidige zoekgedrag.

‍

De opzet omvatte duidelijke categorisatie, creativiteitsparameters en het gebruik van aangepaste labels om de test- en controlegroepen van elkaar te onderscheiden.

Er werd een aangepast label aangebracht op de testgroep om ervoor te zorgen dat alleen die producten werden geoptimaliseerd, zodat de resultaten nauwkeurig konden worden bijgehouden.

Resultaten

De A/B-test vond plaats van 1 december tot 10 januari. In deze periode werden de volgende resultaten behaald:

‍

De A/B-test vergeleek de prestaties van twee groepen producten in Google Shopping:

1. Testgroep (Geoptimaliseerde eigenschappen): Producten met verbeterde eigenschappen.
2. Controlegroep (standaardattributen): Producten met standaardattributen.

Inzichten in prestaties:

1. Verloving:
   • De significante toename in klikken (+66%) bij de testgroep benadrukt de positieve impact van geoptimaliseerde productattributen op de klantbetrokkenheid.
2. Zichtbaarheid:
   • De testgroep behaalde 45% meer impressies, wat suggereert dat geoptimaliseerde attributen het concurrentievermogen van de producten in veilingen verbeterden, mogelijk door hogere relevantiescores.
3. Productdistributie:
   • De bijna gelijke verdeling van producten (49,4% test vs. 50,6% controle) zorgt ervoor dat de test eerlijk is uitgevoerd, zonder dat de resultaten naar één groep zijn verschoven.

Volgende stappen

Na het bekijken van de resultaten heeft Elevate de volgende stappen geschetst voor het verder verbeteren van de campagnes van Aaiko. Elevate ontwikkelde een driestappenplan om verdere groei te stimuleren:

1. Nieuwe tests: na deze eerste optimalisatieronde wil Elevate de tests uitbreiden naar andere productgroepen om de schaalbaarheid van het optimalisatieproces te beoordelen.
2. Zombie : Richt je op slecht presterende (zombie-)producten door vergelijkbare AI-gestuurde optimalisatietechnieken toe te passen om hun zichtbaarheid en verkoop te vergroten.
3. Hero Optimalisatie: Maximaliseer het potentieel van goed presterende producten door hun titels en trefwoorden verder te verfijnen om hun concurrentievoordeel te behouden.

In de volgende fase is Elevate ook van plan om de controlegroep te optimaliseren met behulp van AI om de algehele SERP zichtbaarheid van Aaiko te vergroten. Voor nieuwe productlanceringen kunnen dezelfde prompts en instellingen worden hergebruikt om een onmiddellijke optimalisatie te garanderen, perfect in lijn met Aaiko's merk als fashion-forward bedrijf.