Un equipo encabezado por Md Nishat Raihan publicó BanglaShield en arXiv. El recurso reúne 10,245 instrucciones en bengalí en tres formas de escritura, cada una etiquetada según su nivel de seguridad. Al probar seis modelos de lenguaje grandes actuales, estos clasificaron como seguras el 47 % de las instrucciones no seguras escritas en el alfabeto bengalí y el 63 % de las romanizadas. BanglaShield, un codificador compacto ajustado con datos específicos, obtuvo una macro-F1 de 87.8 en las instrucciones escritas en el alfabeto bengalí y de 84.4 en las romanizadas. Superó al mejor LLM por unos 45 puntos y utilizó cerca de 130 × menos parámetros.
Por qué importa
Los desarrolladores de aplicaciones en bengalí pueden usar BanglaShield para filtrar contenido no seguro con más fiabilidad que los clasificadores actuales basados en LLM.
