Oossa

TorchNeuron ger Trainium inbyggt PyTorch-stöd

PyTorch lanserar TorchNeuron, en backend med öppen källkod som gör att modeller kan köras på Trainium-chip utan kodändringar.

NotisAv Publicerad av Oossa: Senast uppdaterad: 1 min läsning

PyTorch har presenterat TorchNeuron, en inbyggd backend som gör att AWS Trainium visas som en vanlig PyTorch-enhet. Med det nya biblioteket kan utvecklare flytta en modell till Trainium med kommandot .to('neuron') och använda torch.compile för produktionsprestanda. Det stöder eager execution, adaptive eager mode och anpassade kärnor via Neuron Kernel Interface. Koden släpps som öppen källkod under Apache 2.0 och den offentliga betaversionen startar den 20 okt.

Varför det spelar roll

Forskare kan använda samma PyTorch-kod för att dra nytta av Trainiums prestanda utan att skriva om sina arbetsflöden.

Var den här artikeln användbar?
Dela

Läs vidare

Oossa · Nyhetsbrev

Veckans AI, förklarad

Varje måndag: nyheterna som är värda att känna till, på enkel svenska. Gratis, ingen spam.