# Jev, çocuk sağlığı yapay zekâsı değerlendirmesinde LLM’lerle yarışıyor

> Araştırmacılara göre daha düşük maliyetli karar dili modeli Jev, klinik testlerde hekimlerin puanlarıyla, önde gelen LLM değerlendiricileri kadar uyum gösteriyor.

Oossa · 2026-10-22 · https://oossa.com/tr/new-decision-model-jev-matches-many-llm-judges-in-pediatric-ai-evaluation

İsrailli araştırmacılardan oluşan bir ekip, klinik yapay zekâ çıktıları hakkında yapılandırılmış değerlendirmeler yapan bir karar dili modeli olan Jev’i tanıttı. Aralarında doktorların puanladığı 118 çocuk sağlığı yanıtının da bulunduğu dört görevde modeli test ettiler. Jev’in uyum puanı (Gwet’s AC2 0.50), karşılaştırdıkları 12 büyük dil modeli (LLM) değerlendiricisinin yedisinden yüksek ya da onlarla aynı düzeydeydi. Bu değerlendiriciler arasında Claude Opus 5.5 (0.49) ve GPT‑6 (0.38) da yer aldı. Jev, ikili HealthBench ölçütlerinde de LLM değerlendiricileriyle aynı ya da daha iyi sonuçlar verdi ve MedHELM görevlerinde üç LLM’den oluşan bir jüriye benzer performans gösterdi. Makaleye göre Jev’in maliyeti öncü LLM değerlendiricilerinden 73‑294 kat daha düşük, çalışma hızı ise 7‑57 kat daha yüksek.

## Gerçekler

- Jev’in hekim değerlendirmeleriyle uyumu (Gwet’s AC2): 0.50
- Öncü LLM değerlendiricilerinin maliyeti Jev’den 73‑294 kat fazla; görevleri tamamlamaları ise 7‑57 kat daha uzun sürüyor

## Neden önemli

Hastaneler, pahalı ve yavaş LLM değerlendiricileri yerine Jev’i kullanarak çocuklara yönelik yapay zekâ araçlarını daha düşük maliyetle ve daha hızlı değerlendirebilir.

## Kaynaklar ve referanslar

1. [Decision language models as affordable and rapid alternatives to LLM judges of clinical generative AI](https://arxiv.org/abs/2610.28826) – arXiv, 2026-10-22

Son güncelleme: 2026-10-22
