Oossa

llama.cpp varnar för p_min vid sannolikhetsbaserat utkast

Den nya versionen varnar när flaggan p_min används tillsammans med sannolikhetsbaserad utkastprovtagning, för att förhindra att token tappas oavsiktligt.

NotisAv Publicerad av Oossa: 1 min läsning

Open source-biblioteket llama.cpp släppte version b12364 den 2026-11-13. Nu loggas en varning om flaggan --spec-draft-p-min är inställd samtidigt som sannolikhetsbaserad utkastprovtagning används. Rekommendationen är att sätta p_min till noll. Ändringen gör att p_min-gränsen inte tillämpas på MTP- och DFlash2-utkast, som tidigare kunde kasta bort token som målmodellen skulle ha accepterat. Varningen visas bara för utkastmodeller som faktiskt använder p_min, så att n-gram- och DSpark-utkastmodeller inte ger onödiga varningar.

Varför det spelar roll

Utvecklare kan undvika att token försvinner obemärkt när de finjusterar utkastmodeller, vilket ger mer tillförlitlig textgenerering.

Var den här artikeln användbar?
Dela

Läs vidare

Oossa · Nyhetsbrev

Veckans AI, förklarad

Varje måndag: nyheterna som är värda att känna till, på enkel svenska. Gratis, ingen spam.