Un equipo de investigadores dirigido por Yong Bai presentó Efficiently Scalable Transformer (EST), un modelo para predecir la tasa de clics (CTR). EST procesa todas las entradas sin procesar en una sola secuencia, lo que evita agregarlas de forma prematura y perder detalles. Incorpora Lightweight Cross-Attention para reducir interacciones redundantes y Content Sparse Attention para seleccionar los comportamientos con mayor señal. En las pruebas realizadas en la plataforma de publicidad gráfica de Taobao, EST superó al modelo que ya estaba en producción.
Por qué importa
Los anunciantes de Taobao pueden esperar mayores ingresos por impresión gracias a unas predicciones más precisas.