Oossa

Cambrian-BEV يسرّع فهم الفيديو باستخدام رموز المنظور العلوي

تضغط طريقة جديدة لترميز البيانات 128 إطارًا من الفيديو في 729 رمزًا مكانيًا، فتقلّص زمن التهيئة المسبقة للنموذج اللغوي الكبير 2.9 مرة، واستهلاك الذاكرة 3.6 مرة.

خبر موجزبقلم نشرته Oossa: 1 دقائق قراءة

قدّم باحثون Cambrian-BEV، وهي طريقة لتحويل الرقع البصرية في الفيديو إلى شبكة موحّدة بمنظور علوي. وتستخدم العمق ووضعية الكاميرا لدمج المشاهدات التي ترصد المكان نفسه، مهما اختلفت زاوية الرؤية أو الزمن. وتحافظ الطريقة على بنية النموذج نفسها، لكنها تستبدل رموز الإطارات برموز منظور علوي ضمن شبكة 27×27. وفي اختبار VSI-Bench، حققت نتيجة 63.48، متقدمةً بـ8.5 نقاط على خط أساس يعتمد على رموز الإطارات، مع استخدام عدد أقل بكثير من الرموز.

لماذا يهم

تتيح هذه الطريقة للمطورين إنشاء مساعدين أسرع وأخف وزنًا يعملون بالفيديو، ويستدلّون على العلاقات المكانية بموثوقية أكبر.

هل كان هذا المقال مفيدًا؟
مشاركة

اقرأ أيضًا

Oossa · النشرة البريدية

أسبوع الذكاء الاصطناعي، مشروحًا

كل يوم اثنين: الأخبار التي تستحق المعرفة، بلغة بسيطة. مجانًا وبلا رسائل مزعجة.