# बच्चों के स्वास्थ्य से जुड़े AI मूल्यांकन में Jev ने बड़े LLM जजों को टक्कर दी

> शोधकर्ताओं के मुताबिक, कम खर्च वाला निर्णय मॉडल Jev क्लिनिकल परीक्षणों में डॉक्टरों की रेटिंग से उतना ही मेल खाता है जितने कई शीर्ष LLM जज।

Oossa · 2026-10-22 · https://oossa.com/hi/new-decision-model-jev-matches-many-llm-judges-in-pediatric-ai-evaluation

इज़राइली शोधकर्ताओं की एक टीम ने Jev पेश किया है—यह निर्णय मॉडल क्लिनिकल AI के जवाबों पर व्यवस्थित फैसले देता है। उन्होंने चार तरह के कार्यों पर इसे परखा, जिनमें डॉक्टरों द्वारा मूल्यांकित बच्चों से जुड़े 118 जवाब शामिल थे। Jev का सहमति स्कोर (Gwet's AC2 0.50) उन 12 बड़े भाषा मॉडल (LLM) जजों में से सात के बराबर या उनसे बेहतर रहा, जिनसे इसकी तुलना की गई। इनमें Claude Opus 5.5 (0.49) और GPT‑6 (0.38) शामिल थे। HealthBench के हां-या-नहीं वाले मानदंडों पर भी Jev ने LLM जजों के बराबर या बेहतर प्रदर्शन किया और MedHELM के कार्यों में तीन LLM के निर्णायक पैनल जैसा प्रदर्शन किया। शोधपत्र के मुताबिक, Jev की लागत अत्याधुनिक LLM जजों के मुकाबले 73‑294× कम है और यह 7‑57× तेज़ चलता है।

## तथ्य

- डॉक्टरों के साथ Jev का Gwet's AC2 सहमति स्कोर: 0.50
- अत्याधुनिक LLM जजों की लागत Jev से 73‑294 गुना अधिक है और उन्हें 7‑57 गुना अधिक समय लगता है

## यह क्यों मायने रखता है

अस्पताल महंगे और धीमे LLM जजों के बजाय Jev का इस्तेमाल करके बच्चों के लिए AI टूल का मूल्यांकन कम खर्च में और जल्दी कर सकते हैं।

## स्रोत और संदर्भ

1. [Decision language models as affordable and rapid alternatives to LLM judges of clinical generative AI](https://arxiv.org/abs/2610.28826) – arXiv, 2026-10-22

अंतिम अपडेट: 2026-10-22