Oossa

llama.cpp unterstützt jetzt Nemotron‑3(.5)‑Embed

Die Open-Source-Bibliothek llama.cpp (v b11778) führt jetzt Nemotron‑3(.5)‑Embed aus. Fertige Builds gibt es für macOS, iOS und Linux sowie für Vulkan und CUDA.

KurzmeldungVon Von Oossa veröffentlicht: 1 Min. Lesezeit

ggml‑org hat llama.cpp in Version b11778 veröffentlicht. Das Update ergänzt die Unterstützung für Nemotron‑3(.5)‑Embed, ein neues Text-Embedding-Modell. Außerdem stehen vorkompilierte Binärdateien für macOS mit Apple Silicon, macOS mit Intel-Prozessoren, iOS und mehrere Ubuntu-Varianten bereit – darunter GPU-Builds für Vulkan und CUDA‑12.8. Die Dateien lassen sich über direkte Download-Links auf der GitHub-Release-Seite herunterladen.

Warum es wichtig ist

Entwickler können Nemotron‑3(.5)‑Embed jetzt lokal auf einer Vielzahl von Geräten ausführen, ohne einen Cloud-Dienst zu benötigen.

War dieser Artikel hilfreich?
Teilen

Als Nächstes lesen

Oossa · Newsletter

Die KI-Woche, erklärt

Jeden Montag: die Nachrichten, die man kennen sollte – verständlich. Kostenlos, kein Spam.