Oossa

Tencent ने Hugging Face पर Hy-Memory-30B-A3B का GGUF मॉडल जारी किया

llama.cpp के साथ स्थानीय रूप से चलाने के लिए तीन क्वांटाइज़्ड संस्करण (Q6_K, Q8_0, Q4_K_M) उपलब्ध हैं, जो लंबे समय तक याद रखने की सुविधा देते हैं।

संक्षिप्तलेखक: Oossa द्वारा प्रकाशित: 1 मिनट पढ़ना

Tencent Hunyuan ने अपने Hy-Memory-30B-A3B मॉडल की GGUF-क्वांटाइज़्ड फ़ाइलें Hugging Face पर उपलब्ध कराई हैं। रिपॉज़िटरी में तीन आकार हैं—24.7 GB (Q6_K), 32 GB (Q8_0) और 18.2 GB (Q4_K_M)—और सभी llama.cpp की जाँच में पास हुए हैं। Mem0 और MemOS जैसे फ्रेमवर्क में यह मॉडल मेमोरी राइटर की तरह काम करता है: यह तय करता है कि कौन-सी जानकारी रखनी है और उसे कैसे अपडेट करना है। कंपनी के बेंचमार्क में Q6_K संस्करण ने सबसे अधिक गुणवत्ता स्कोर हासिल किया, जबकि Q4_K_M संस्करण डाउनलोड के लिहाज़ से सबसे छोटा है।

यह क्यों मायने रखता है

डेवलपर लंबे समय तक मेमोरी बनाए रखने के लिए बने इस खास मॉडल को क्लाउड संसाधनों के बिना स्थानीय रूप से चला सकते हैं, जिससे बैंडविड्थ और हार्डवेयर की लागत बचती है।

क्या यह लेख उपयोगी था?
साझा करें

यह भी पढ़ें

Oossa · न्यूज़लेटर

AI का हफ़्ता, आसान भाषा में

हर सोमवार: जानने लायक खबरें, सरल भाषा में। मुफ़्त, कोई स्पैम नहीं।