أفادت MIT Technology Review بأن METR، وهي منظمة غير ربحية تُقيّم الذكاء الاصطناعي، أصدرت نسخة محدّثة من رسمها البياني للآفاق الزمنية. ويضيف الرسم الجديد مهاماً تستغرق من البشر وقتاً أطول بكثير وتتطلب مزيداً من التقدير، مثل تصميم تقييمات للذكاء الاصطناعي أو تقييم الحجج الفلسفية. وكان الرسم الأصلي، الذي حظي بانتشار واسع، يقيس التقدم بحسب الوقت الذي يحتاج إليه الإنسان لإنجاز مهمة، وأظهر أن النماذج المتقدمة تضاعف طول المهام التي تستطيع إنجازها كل أربعة أشهر. ويحافظ التحديث على هذا الاتجاه في المهام السهلة القابلة للتحقق، مثل البرمجة والرياضيات، لكنه يسلّط الضوء أيضاً على اتساع الفجوة في المهام المفتوحة النهاية. تهدف المهام المضافة إلى اختبار قدرات مهمة لأتمتة البحث والتطوير. وفي مهمة تصميم التقييمات، لم يتجاوز أداء أكثر النماذج تقدماً مستوى «أعلى بقليل من الحد الأدنى»، وهو ما لا يجعلها مفيدة لموظفي METR. وفي مهمة الحجج الفلسفية، جاءت درجات النماذج أيضاً دون مستوى الخبراء البشر. ويقول باحثون استشهدت بهم المقالة إن هذه النتائج ليست مفاجئة؛ فقد أظهرت أعمال سابقة أن الذكاء الاصطناعي لا يزال عاجزاً عن تكرار الأبحاث البشرية في علوم الحاسوب من تلقاء نفسه. ويشير موظفو METR أنفسهم إلى صعوبة قياس الأداء في هذه المهام. فبالنسبة إلى كثير من المهام الجديدة، تحل تقديرات الوقت الذي يحتاج إليه البشر محل الاختبارات الفعلية، لأن دفع المال لأشخاص كي ينجزوا أعمالاً تستغرق مئات الساعات مكلف. لذلك يتضمن التقرير عدداً أقل من المهام التي تتطلب حكماً وتقديراً، ويقر بأن بياناتها أقل متانة من بيانات المجموعة الأصلية. ويرى خبراء مثل ساياش كابور من UC Berkeley وناجونغ كيم من Boston University أن إدراج هذه المهام خطوة إيجابية، لكنهم يحذرون من أن الاتجاهات المتعلقة بالقدرات التي يصعب قياسها ستظل متذبذبة. إجمالاً، يؤكد الرسم المحدّث المكاسب السريعة في المهام التي يسهل التحقق من نجاحها، بينما لا يزال التقدم في الأعمال التي تتطلب حكماً وتقديراً غير مؤكد. ومن المرجح أن يؤثر الرسم في نظرة المجتمع البحثي إلى الإطار الزمني لأتمتة البحث والتطوير بالذكاء الاصطناعي.
لماذا تكتسب المهام الجديدة أهمية؟
إذا كان الذكاء الاصطناعي سيساعد في تصميم تجارب جديدة أو كتابة مقترحات بحثية، فعليه أن يتعامل مع مهام لا يمكن التحقق منها باختبار بسيط لنجاحها أو فشلها. ويُظهر رسم METR المحدّث أن النماذج الحالية لا تزال متأخرة عن البشر في هذه المجالات، ما يشير إلى أن أتمتة الأبحاث بالكامل بالذكاء الاصطناعي ليست وشيكة. وبالنسبة إلى الشركات التي تراهن على تسريع تطوير المنتجات بالذكاء الاصطناعي، تعني هذه الفجوة أنها لا ينبغي أن تتوقع مكاسب فورية من استخدامه في القرارات الاستراتيجية رفيعة المستوى. فما زالت هذه التقنية أكثر موثوقية في الأعمال المحددة القابلة للتحقق، مثل توليد الشيفرات البرمجية أو تحليل البيانات.
لماذا يهم
بالنسبة إلى المستخدمين العاديين، يعني التحديث أن أدوات الذكاء الاصطناعي ستواصل التحسن في المهام الواضحة مثل البرمجة، لكنها ليست جاهزة بعد لتحل محل الحكم البشري في تخطيط الأبحاث أو الاستدلال الفلسفي. وينبغي للشركات مواصلة الاعتماد على الذكاء الاصطناعي لأتمتة المهام الروتينية، مع إبقاء البشر مشاركين في القرارات الاستراتيجية.