Oossa

Tencent, GGUF kuantizasyonlu Hy-Memory-30B-A3B’yi yayımladı

llama.cpp ile yerel çıkarım için Q6_K, Q8_0 ve Q4_K_M olmak üzere üç sürüm sunuluyor; model, uzun süreli belleğe verimli biçimde bilgi yazmayı sağlıyor.

Kısa haberYazan: Oossa yayın tarihi: 1 dk okuma

Tencent Hunyuan, Hy-Memory-30B-A3B modelinin GGUF kuantizasyonlu dosyalarını Hugging Face’e ekledi. Depoda 24.7 GB (Q6_K), 32 GB (Q8_0) ve 18.2 GB (Q4_K_M) boyutlarında üç sürüm bulunuyor; tümü llama.cpp kontrollerini geçti. Model, Mem0 ve MemOS gibi çerçevelerde bir bellek yazıcısı olarak çalışıyor; hangi bilgilerin saklanacağına ve belleğin nasıl güncelleneceğine karar veriyor. Şirketin kıyaslama testinde en yüksek kalite puanını Q6_K sürümü alırken, indirmesi en küçük olan sürüm Q4_K_M oldu.

Neden önemli

Geliştiriciler, bulut kaynaklarına ihtiyaç duymadan uzun süreli bellek için özel olarak tasarlanmış bir modeli yerel olarak çalıştırabilir; böylece bant genişliği ve donanım maliyetlerinden tasarruf edebilir.

Bu makale faydalı oldu mu?
Paylaş

Sıradaki okuma

Oossa · Bülten

Yapay zekâda hafta, anlaşılır dille

Her pazartesi: bilmeye değer haberler, sade bir dille. Ücretsiz, spam yok.