Ricursive Intelligence heeft Ripple-65B Preview uitgebracht, een taalmodel met 65 miljard parameters waarvan de gewichten beschikbaar zijn onder de Apache 2.0-licentie. Volgens MarkTechPost behaalde het model 80,5 punten op Terminal-Bench 2.1, een benchmark die in de berichtgeving over de release wordt genoemd. Die score zou hoger zijn dan die van Amerikaanse open modellen die tot 15 keer groter zijn.
De gewichten van een model zijn de aangeleerde waarden die bepalen hoe het reageert. ‘Open weights’ betekent dat die waarden beschikbaar worden gesteld. Apache 2.0 staat gebruik, aanpassing en verspreiding in het algemeen toe, onder de voorwaarden van de licentie. In de aankondiging wordt de licentie genoemd, maar niet waar mensen het model kunnen downloaden, welke hardware ervoor nodig is of of er naast de licentie nog beperkingen gelden.
Wat zegt de score?
De score van 80,5 is het duidelijkste prestatiegegeven dat is verstrekt. De vergelijking met modellen die tot 15 keer groter zijn, kan interessant zijn voor lezers die willen weten hoeveel rekenkracht een model nodig heeft. Het bericht noemt die modellen echter niet en geeft ook hun scores niet. Verder ontbreken details over de benchmarkinstellingen, wie de evaluatie heeft uitgevoerd en of de resultaten onafhankelijk zijn gecontroleerd. Daardoor is de vergelijking op zichzelf moeilijk te beoordelen.
De aanduiding ‘dense’ verwijst naar een modelontwerp waarbij bij elke stap in het genereren van een antwoord alle modelparameters worden gebruikt, in plaats van slechts een deel van het model te selecteren. De aankondiging bevat geen verdere technische details en licht niet toe hoe Ripple-65B presteert op andere taken dan Terminal-Bench 2.1. Het model wordt ook een preview genoemd. De release is dus geen uitspraak over een definitieve versie en biedt geen garantie voor prestaties in alledaags gebruik.
Wat is nog onduidelijk?
Met deze release voegt Ricursive een nieuw open-weightsmodel toe aan een markt waarin ontwikkelaars modelgewichten kunnen bekijken en gebruiken volgens de opgegeven licentievoorwaarden. De informatie die nodig is om het praktische gebruik te beoordelen, is hier echter beperkt: er is geen prijs, downloadlocatie, hardwareadvies of onafhankelijke testinformatie vermeld. De gerapporteerde score is één benchmarkresultaat en geen algemene maatstaf voor hoe goed het model schrijft, vragen beantwoordt of softwaretaken uitvoert.
Waarom het ertoe doet
Ontwikkelaars die met modelgewichten willen experimenteren, kunnen Ripple-65B mogelijk gebruiken, aanpassen of verspreiden volgens de voorwaarden van Apache 2.0. De beschikbare informatie maakt echter niet duidelijk hoe het model toegankelijk is, wat het kost om te draaien of dat de benchmarkvergelijking standhoudt bij onafhankelijke tests.
