Oossa

Fireworks AI hittar dolda signaler i Kimi K3 och Qwen3.5‑9B

Med hjälp av J‑Lens visade forskare att två modeller med öppen källkod avslöjar uppgiftsrelaterade ord i sina dolda tillstånd innan de genererar dem.

NotisAv Publicerad av Oossa: Senast uppdaterad: 1 min läsning

Fireworks AI använde Jacobian Lens (J‑Lens) – en tränad prob som läser av modellens dolda tillstånd – på två öppna modeller, Kimi K3 och Qwen3.5‑9B. Proben fick fram ord med koppling till uppgiften bland de tio främsta förutsägelserna från modellernas interna tillstånd, innan modellerna faktiskt skrev orden. I Kimi innehöll alla 20 testade ordlistor minst en träff; i Qwen stämde 19 av 20 listor. Studien visade också att mönstret finns medan modellen bearbetar prompten, inte bara under genereringen.

Varför det spelar roll

Det ger forskare en inblick i modellens resonemang innan den svarar och öppnar nya möjligheter att studera och förbättra AI-beteenden.

Var den här artikeln användbar?
Dela

Läs vidare

Oossa · Nyhetsbrev

Veckans AI, förklarad

Varje måndag: nyheterna som är värda att känna till, på enkel svenska. Gratis, ingen spam.