Oossa

llama.cpp b11623 añade una ruta de convolución para GPU AMD

La versión incorpora una ruta conv2d basada en SIMT para GPU AMD sin compatibilidad con WMMA. El proyecto no publica cifras de rendimiento sobre este cambio.

BrevePor Publicado por Oossa: 1 min de lectura

El equipo de ggml-org lanzó llama.cpp b11623, que incorpora una ruta SIMT implicit GEMM para convoluciones 2D en GPU AMD sin compatibilidad con WMMA. El cambio también omite esta ruta cuando las reducciones son cortas; las notas de la versión no cuantifican su velocidad ni indican qué tarjetas AMD se benefician. Hay compilaciones descargables para macOS, iOS y varias plataformas Linux.

Por qué importa

Para quienes desarrollan con llama.cpp en GPU AMD, esta ruta permite realizar convoluciones cuando no está disponible WMMA, pero las notas no aclaran su impacto en el rendimiento ni qué hardware es compatible.

¿Te resultó útil este artículo?
Compartir

Sigue leyendo

Oossa · Boletín

La semana en IA, explicada

Cada lunes: las noticias que vale la pena conocer, en lenguaje sencillo. Gratis, sin spam.