Oossa

llama.cpp b11849 añade compatibilidad con SGN en Hexagon

La versión incorpora la operación de signo para Qualcomm Hexagon, también en precisión media. Además, ofrece compilaciones descargables para varias plataformas.

BrevePor Publicado por Oossa: 1 min de lectura

El equipo de ggml-org publicó llama.cpp b11849, que añade compatibilidad con la operación SGN en Hexagon, la arquitectura de procesadores de Qualcomm. Según las notas de la versión, el cambio incluye compatibilidad con precisión media y una optimización que utiliza el bit de signo.

La versión también ofrece compilaciones para macOS, iOS y Ubuntu, incluidas versiones para CPU x64, arm64 y s390x. Las notas no indican qué dispositivos o cargas de trabajo podrían experimentar una mejora práctica de velocidad o rendimiento.

Por qué importa

Los desarrolladores que usan llama.cpp con hardware Hexagon pueden aprovechar la nueva operación SGN, pero las notas de la versión no cuantifican su efecto en el rendimiento de los modelos.

¿Te resultó útil este artículo?
Compartir

Sigue leyendo

Oossa · Boletín

La semana en IA, explicada

Cada lunes: las noticias que vale la pena conocer, en lenguaje sencillo. Gratis, sin spam.