قدّم باحثون EDB-Bio، وهو معيار يستند إلى دراسات منشورة في ثلاثة مجالات بيولوجية، لاختبار قدرة النماذج اللغوية على تقييم الأدلة المؤيدة لفرضيات علمية. وفي اختبارات الباحثين، أبدت النماذج غير المدرّبة ثقة أقل من اللازم بصورة منهجية، وحققت نتائج تقارب ما يحققه توقّع بسيط قائم على المعدل الأساسي؛ لكن تدريبها على تقديم احتمالات أفضل معايرة حسّن نتائجها.
ويقول الباحثون إن نموذجهم Ibis0 اختار التجارب بكفاءة أعلى بمقدار 2.5 مرة من أفضل نموذج متقدم، في مهمة متتابعة لاختيار التجارب. وأتاحوا الشيفرة والبيانات والنماذج المدرّبة.
لماذا يهم
بالنسبة إلى العلماء الذين يستعينون بالذكاء الاصطناعي للمساعدة في اختيار التجارب، تشير النتائج إلى أن التدريب على معايرة الاحتمالات قد يحسّن اختيار التجارب، لكن التفوق المذكور يقتصر على المهمة التي تناولتها الدراسة ولم يُتحقق منه بصورة مستقلة هنا.
