Un estudio publicado en arXiv informa que la estructura de una red permitió predecir muy poco hacia qué postura llegarían los grupos simulados de modelos de lenguaje. Los investigadores analizaron 73,080 intercambios controlados entre ocho modelos ajustados para seguir instrucciones y luego usaron los resultados en simulaciones con 10,000 agentes.
Según los investigadores, a veces los modelos cambiaron de opinión y adoptaron posturas más allá del rango de las que habían observado; algunos grupos también coincidieron en afirmaciones objetivamente falsas. En las simulaciones, el sesgo interno de cada modelo y la forma de presentar los mensajes influyeron más que una medida de la red llamada conectividad algebraica.
Por qué importa
Los equipos que usan varios modelos de lenguaje para debatir afirmaciones no deberían suponer que cambiar la forma en que están conectados evitará que compartan errores. El estudio sugiere que los sesgos de los modelos y la forma de presentar los mensajes aún pueden determinar el consenso.
