Onderzoekers beschrijven een systeem dat Roblox nu gebruikt om te selecteren welke advertentievarianten doorgaan naar de rangschikking van advertenties per gebruiker. Het systeem schat de prestaties in op basis van gegevens die worden gedeeld tussen doelgroepsegmenten, items, campagnes en advertentievarianten. Zo kan een nieuwe variant gebruikmaken van informatie over de groepen waar die bij hoort. Eén willekeurige score geeft varianten waarover minder gegevens beschikbaar zijn de kans om te worden geselecteerd en meer inzichten op te leveren.
Bij een replay van het verkeer van Roblox Sponsored Ads leidde de voorselectie tot een 8,14% hogere voorspelde afspeelratio, tegenover 2,80% bij een willekeurige voorselectie van dezelfde omvang. Volgens de onderzoekers werden ruim 40% minder varianten doorgestuurd dan bij de volledige verzameling en nam de verwerkingstijd met 0,2% toe. In het artikel staat ook dat Roblox het systeem na een live A/B-test heeft ingevoerd.
Waarom het ertoe doet
Voor adverteerders op Roblox kan het systeem ervoor zorgen dat nieuwere advertenties worden getest, terwijl er minder varianten naar de volgende rangschikkingsstap gaan. Het artikel vermeldt niet wat de resultaten van de live A/B-test waren.