Oossaهوش مصنوعی به‌سرعت پیشرفت می‌کند. ما آن را ساده توضیح می‌دهیم.

Jevstiller متن‌باز، اجرای محلی درخواست‌های Jev را ممکن می‌کند

این ابزار جامعه‌محور، مدلی کوچک روی دستگاه می‌سازد که به درخواست‌های آشنای Jev پاسخ می‌دهد و هزینه توکن و تأخیر را کاهش می‌دهد.

خبر کوتاهOossa1 دقیقه مطالعه

Jevstiller پروژه‌ای متن‌باز است که مدلی کوچک و محلی می‌سازد تا درخواست‌های معمول Jev را روی سخت‌افزار خودتان پاسخ دهد. این مدل محلی از پاسخ‌های Jev یاد می‌گیرد و فقط درخواست‌هایی را که درباره‌شان مطمئن نیست به سرویس ابری Jev می‌فرستد. سازندگانش می‌گویند این ابزار می‌تواند در حدود ۱۵ میلی‌ثانیه به درخواست‌های آشنا پاسخ دهد و از پرداخت هزینه ۴۲ دلاری به‌ازای هر یک میلیارد توکن جلوگیری کند. به ادعای آن‌ها، پاسخ‌های این ابزار در ۹۸ درصد مواقع با پاسخ‌های Jev مطابقت دارد و برای حفظ ایمنی، باقی ترافیک در فضای ابری پردازش می‌شود.

این سیستم برای بررسی میزان مطابقت، پیوسته ۲ درصد ثابتی از درخواست‌ها را با Jev می‌سنجد و اگر این میزان کاهش یابد، مدل را دوباره آموزش می‌دهد.

چرا مهم است

اجرای محلی Jev می‌تواند هزینه استفاده از هوش مصنوعی را به‌شدت کاهش دهد و پاسخ‌گویی به کارهای رایج را سریع‌تر کند.

آیا این مقاله مفید بود؟
اشتراک‌گذاری

بیشتر بخوانید

Oossa · خبرنامه

هفتهٔ هوش مصنوعی، به زبان ساده

هر دوشنبه: خبرهایی که ارزش دانستن دارند، به زبان ساده. رایگان و بدون هرزنامه.

منابع و ارجاع‌ها

#منبعرسانهتاریخنکته اصلی
1Open source tool distills Jev so you can run it locally ↗The Register۷ مهر ۱۴۰۵Jevstiller targets 98% agreement by learning familiar requests on your hardware while sending uncertain and audited queries upstream

1 منبع

آخرین به‌روزرسانی: ·Markdown·llms.txt