Oossa

Estudo: modelos de linguagem podem concordar sem influência da rede

Um estudo com oito modelos de linguagem concluiu que vieses compartilhados e a forma como as mensagens eram apresentadas pesaram mais do que as conexões da rede em discussões simuladas.

NotaPor Publicado pelo Oossa: 1 min de leitura

Um estudo publicado no arXiv relata que a estrutura da rede pouco ajudou a prever em que ponto grupos simulados de modelos de linguagem chegariam a um consenso. Os pesquisadores analisaram 73,080 interações controladas entre oito modelos ajustados para seguir instruções e usaram os resultados em simulações com 10,000 agentes.

Segundo os pesquisadores, às vezes os modelos mudavam de opinião para além do conjunto de pontos de vista que haviam encontrado, e alguns grupos chegavam a um consenso em torno de afirmações objetivamente falsas. Nas simulações, o viés interno de cada modelo e a forma como as mensagens eram apresentadas tiveram mais influência do que uma medida da rede chamada conectividade algébrica.

Por que importa

Equipes que usam vários modelos de linguagem para discutir afirmações não devem presumir que mudar a forma como eles estão conectados evitará erros compartilhados; o estudo sugere que os vieses dos modelos e a apresentação das mensagens ainda podem influenciar o consenso.

Este artigo foi útil?
Compartilhar

Leia a seguir

Oossa · Newsletter

A semana em IA, explicada

Toda segunda-feira: as notícias que valem a pena, em linguagem simples. Grátis, sem spam.