Ricursive Intelligence har släppt Ripple-65B Preview, en språkmodell med 65 miljarder parametrar vars vikter erbjuds under Apache 2.0-licensen. MarkTechPost rapporterar att modellen fick 80,5 poäng på Terminal-Bench 2.1, ett riktmärke som nämns i rapporteringen om lanseringen. Poängen uppges vara högre än resultaten för amerikanska modeller med öppna vikter som är upp till 15 gånger större.
En modells vikter är de inlärda värden som formar dess svar. ”Öppna vikter” innebär att dessa värden görs tillgängliga, medan Apache 2.0 är en licens som i regel tillåter användning, ändringar och vidare distribution enligt licensvillkoren. I tillkännagivandet anges licensen, men det framgår inte var modellen kan hämtas, vilken hårdvara den kräver eller om det finns andra begränsningar utöver licensvillkoren.
Vad visar poängen?
Uppgiften om 80,5 poäng är den tydligaste informationen om modellens prestanda. Jämförelsen med modeller som är upp till 15 gånger större kan vara intressant för den som vill veta hur mycket beräkningskapacitet en modell kan kräva, men rapporten namnger inte modellerna eller anger deras poäng. Den specificerar inte heller inställningarna för testet, vem som genomförde utvärderingen eller om resultaten har kontrollerats oberoende. Därför är jämförelsen svår att bedöma på egen hand.
Beteckningen ”dense” beskriver en modellutformning där alla modellens parametrar används för varje steg när ett svar genereras, i stället för att bara en del av modellen väljs ut. Tillkännagivandet innehåller inga ytterligare tekniska detaljer och förklarar inte hur Ripple-65B presterar på andra uppgifter än Terminal-Bench 2.1. Den kallas också en förhandsversion, så lanseringen ska inte ses som ett besked om en slutlig version eller ett löfte om prestanda vid vanlig användning.
Vad är fortfarande oklart?
Ricursives lansering innebär ytterligare en modell med öppna vikter på en marknad där utvecklare kan granska och köra modellvikter enligt angivna licensvillkor. Men här saknas flera uppgifter som behövs för att bedöma hur användbar modellen är i praktiken: det finns ingen information om pris, nedladdningsplats, hårdvarukrav eller oberoende tester. Den rapporterade poängen är ett resultat från ett enskilt riktmärke, inte ett allmänt mått på hur bra modellen är på att skriva, besvara frågor eller utföra programmeringsarbete.
Varför det spelar roll
Utvecklare som vill experimentera med modellvikter kan eventuellt använda, ändra eller distribuera Ripple-65B vidare enligt villkoren i Apache 2.0. Men den tillgängliga informationen visar inte hur modellen kan hämtas, vad den kostar att köra eller om jämförelsen i riktmärket håller vid oberoende kontroller.
