Oossa

llama.cpp b11847 åtgärdar HIP-byggen för nyare AMD-GPU:er

Versionen åtgärdar en typkonflikt för BF16-operander som hindrade HIP-byggen för RDNA3- och RDNA4-GPU:er från att kompileras.

NotisAv Publicerad av Oossa: 1 min läsning

Projektet llama.cpp har släppt version b11847 med en korrigering för HIP-byggen riktade mot AMD:s RDNA3- och RDNA4-GPU:er. Ändringen använder 16-bitarsvektorer av typen `short` för BF16-operander som skickas till AMD:s matrisinstruktioner. Värdena förblir bitidentiska när de tolkas på nytt.

I versionslistan finns Ubuntu x64-byggen för ROCm 10.0. Det framgår inte om de färdigbyggda paketen innehåller den specifika korrigeringen, så användare kan behöva bygga från den uppdaterade källkoden.

Varför det spelar roll

Utvecklare som bygger llama.cpp med HIP för de angivna generationerna av AMD-GPU:er bör inte längre stöta på just det här kompileringsfelet. Versionslistan bekräftar inte vilka färdigbyggda paket som innehåller korrigeringen.

Var den här artikeln användbar?
Dela

Läs vidare

Oossa · Nyhetsbrev

Veckans AI, förklarad

Varje måndag: nyheterna som är värda att känna till, på enkel svenska. Gratis, ingen spam.