أفادت دراسة منشورة على arXiv بأن بنية الشبكة لم تساعد كثيرًا في توقع النقطة التي ستنتهي عندها مجموعات محاكاة من نماذج اللغة إلى التوافق. وقاس الباحثون 73,080 تبادلًا مضبوطًا عبر ثمانية نماذج مضبوطة باتباع التعليمات، ثم استخدموا النتائج في محاكاة شملت 10,000 وكيل.
ويقول الباحثون إن النماذج غيّرت آراءها أحيانًا إلى ما يتجاوز نطاق الآراء التي اطّلعت عليها، وإن بعض المجموعات اتفقت على ادعاءات خاطئة موضوعيًا. وفي المحاكاة، كان للتحيز الداخلي لكل نموذج وطريقة صياغة الرسائل أثر أكبر من مقياس شبكي يُعرف باسم الاتصال الجبري.
لماذا يهم
ينبغي للفرق التي تستخدم عدة نماذج لغوية لمناقشة الادعاءات ألا تفترض أن تغيير طريقة ربط النماذج سيمنع الأخطاء المشتركة؛ إذ تشير الدراسة إلى أن تحيزات النماذج وطريقة صياغة الرسائل قد تظل هي المحرك للتوافق.