Oossa

llama.cpp accélère softplus avec Hexagon

La bibliothèque open source llama.cpp exécute désormais l’activation softplus sur le NPU Qualcomm Hexagon, pour de meilleures performances sur les appareils Android compatibles.

BrèvePar Publié par Oossa: 1 min de lecture

Le projet llama.cpp a publié la version b11703 le 17 oct. 2026. Elle ajoute une fonction softplus vectorisée qui s’exécute sur le NPU Hexagon de Qualcomm (HVX). Ce nouvel outil s’appuie sur les primitives Hexagon existantes pour exp et log, afin de conserver les mêmes calculs que la version pour processeur. Cette modification figure dans la version Android arm64, compatible avec les processeurs Snapdragon, les processeurs graphiques Adreno et les NPU Hexagon.

Pourquoi c'est important

Les développeurs peuvent désormais accélérer l’inférence des LLM sur les téléphones équipés d’un NPU Hexagon, ce qui élargit les usages de llama.cpp à faible consommation d’énergie.

Cet article vous a-t-il été utile ?
Partager

À lire ensuite

Oossa · Newsletter

La semaine de l'IA, expliquée

Chaque lundi : l'essentiel de l'actualité, en langage clair. Gratuit, sans spam.