Oossa

ProvenanceGuard prüft Quellen in Multi-Tool-LLM-Agenten

Die neue Ebene ProvenanceGuard von Hugging Face prüft, ob jede Aussage eines Agenten durch genau die angegebene Quelle belegt ist – und erkennt falsche Quellenzuordnungen in der Medizin und anderen Bereichen.

KurzmeldungOossa1 Min. Lesezeit

Hugging Face hat ProvenanceGuard veröffentlicht, einen Prüfer für Antworten von Agenten auf Basis des Model Context Protocol (MCP). Das Tool erhält die IDs der Ausgaben anderer Tools, ordnet jede Aussage ihrer tatsächlichen Quelle zu und blockiert Antworten, in denen Fakten der falschen Quelle zugeschrieben werden. In einem medizinischen Test mit 281 Agentenprotokollen stuften menschliche Prüfer 139 Aussagen als falsch ein. ProvenanceGuard erkannte 138 davon und identifizierte in 86 Prozent der Fälle die richtige Quelle.

Warum es wichtig ist

Wenn jede Aussage durch die richtige Quelle belegt ist, lassen sich irreführende Informationen in sensiblen Bereichen wie dem Gesundheitswesen und dem Finanzwesen verhindern.

War dieser Artikel hilfreich?
Teilen

Als Nächstes lesen

Oossa · Newsletter

Die KI-Woche, erklärt

Jeden Montag: die Nachrichten, die man kennen sollte – verständlich. Kostenlos, kein Spam.

Quellen und Referenzen

1 Quellen

Zuletzt aktualisiert: ·Markdown·llms.txt