Oossa

llama.cpp prend en charge le tiling LFM2 et élargit ses builds

Le runtime LLM open source lit désormais les paramètres de tiling dans les fichiers GGUF et propose des binaires pour de nouvelles configurations de processeurs, de GPU et de systèmes d’exploitation.

BrèvePar Publié par Oossa: 1 min de lecture

L’équipe ggml-org a mis à jour llama.cpp afin qu’il lise les paramètres de tiling de LFM2-VL dans les métadonnées GGUF. Le modèle peut ainsi répartir les images en tuiles selon les valeurs de min_tiles, max_tiles, tile_size et max_pixels_tolerance enregistrées dans le fichier du modèle. Cette version inclut également des binaires précompilés pour de nombreuses plateformes — macOS, Linux, Windows et Android — ainsi que pour divers accélérateurs matériels, notamment CUDA 13, Vulkan et OpenCL.

Pourquoi c'est important

Les développeurs peuvent désormais exécuter des LLM de traitement d’images sur davantage d’appareils sans avoir à écrire de code personnalisé pour le tiling.

Cet article vous a-t-il été utile ?
Partager

À lire ensuite

Oossa · Newsletter

La semaine de l'IA, expliquée

Chaque lundi : l'essentiel de l'actualité, en langage clair. Gratuit, sans spam.