Oossa

llama.cpp b11795 permite reenviar parámetros del servidor

La biblioteca de código abierto llama.cpp ahora reenvía parámetros de muestreo adicionales a través de su API /v1/messages y ofrece nuevas versiones binarias para macOS, Linux e iOS.

BrevePor Publicado por Oossa: 1 min de lectura

El equipo de ggml-org publicó la versión b11795 de llama.cpp. La actualización modifica el servidor para que los parámetros de muestreo se puedan enviar sin cambios en el campo extra_params del endpoint /v1/messages. También añade binarios precompilados para macOS (Apple Silicon e Intel), iOS y varias versiones para Ubuntu con CPU y Vulkan.

Por qué importa

Ahora los desarrolladores pueden personalizar los ajustes de generación mediante la API sin escribir código adicional, lo que agiliza la integración de llama.cpp en aplicaciones.

¿Te resultó útil este artículo?
Compartir

Sigue leyendo

Oossa · Boletín

La semana en IA, explicada

Cada lunes: las noticias que vale la pena conocer, en lenguaje sencillo. Gratis, sin spam.