Oossa

کاهش هزینه Amazon Bedrock با تنظیم TTL، Flex و maxTokens

AWS توضیح می‌دهد چهار تنظیم در سطح درخواست—مدت نگهداری کش پرامپت، سطح سرویس، میزان تلاش برای استدلال و maxTokens—چطور مصرف توکن و هزینه Bedrock را تغییر می‌دهند.

خبر کوتاهنویسنده: منتشرشده توسط Oossa: 1 دقیقه مطالعه

وبلاگ AWS نشان می‌دهد چهار گزینه استنتاج Amazon Bedrock چطور روی صورت‌حساب اثر می‌گذارند. کوتاه‌تر کردن TTL کش، استفاده از سطح سرویس Flex، انتخاب استدلال با تلاش کم و محدودتر کردن maxTokens می‌تواند مصرف توکن و نرخ‌ها را کاهش دهد. این مطلب کد نمونه، نتایج آزمایش و پیوندهایی به جدول‌های قیمت‌گذاری ارائه می‌کند تا توسعه‌دهندگان پیش از اعمال تغییرات در محیط عملیاتی، اثر آن‌ها را بسنجند.

چرا مهم است

توسعه‌دهندگان می‌توانند با تنظیم این چهار گزینه، به‌جای تغییر مدل، هزینه هوش مصنوعی مولد را در Bedrock کاهش دهند.

آیا این مقاله مفید بود؟
اشتراک‌گذاری

بیشتر بخوانید

Oossa · خبرنامه

هفتهٔ هوش مصنوعی، به زبان ساده

هر دوشنبه: خبرهایی که ارزش دانستن دارند، به زبان ساده. رایگان و بدون هرزنامه.