DeepSeek ने GitHub पर DeepEP-Ascend नाम का नया रिपॉज़िटरी प्रकाशित किया है। यह Huawei Ascend NPU पर ट्रेनिंग और इन्फ़रेंस के लिए कम्युनिकेशन लाइब्रेरी उपलब्ध कराता है। इसमें एक्सपर्ट-पैरेलल ऑल-टू-ऑल, पाइपलाइन पैरेललिज़्म और रिमोट मेमोरी एक्सेस का समर्थन है। यह लाइब्रेरी NVIDIA DeepEP API के अनुरूप है और इसे pip कमांड से इंस्टॉल किया जा सकता है। Ascend 950DT पर शुरुआती परीक्षणों में, एक्सपर्ट-पैरेलल साइज़ 32 तक होने पर डिस्पैच बैंडविड्थ हार्डवेयर की सीमा के करीब रही।
यह क्यों मायने रखता है
इससे डेवलपर Huawei के Ascend चिप्स पर बड़े पैमाने के मिक्सचर-ऑफ़-एक्सपर्ट्स मॉडल को हार्डवेयर की संचार गति के करीब चलाने में सक्षम होंगे।