Oossa

OpenAI می‌گوید تأیید کورکورانه در GPT-5 کمتر شده است

OpenAI می‌گوید این رفتار در GPT-5 بیش از دوسوم کاهش یافته؛ اما نتایج آزمایش‌های داخلی، ایمنی پاسخ‌ها در گفت‌وگوهای واقعی را تضمین نمی‌کند.

نویسنده: منتشرشده توسط Oossa: 2 دقیقه مطالعه

Timur Repin · Unsplash

OpenAI می‌گوید GPT-5، مدل پیش‌فرض جدید ChatGPT، کمتر از GPT-4o حرف کاربران را بی‌چون‌وچرا تأیید می‌کند. به گفته شرکت، این رفتار بیش از دوسوم کاهش یافته است. منظور از «تملق هوش مصنوعی» این است که چت‌بات برای خوشایند کاربر با او موافقت کند، حتی اگر حرف او نادرست یا آسیب‌زا باشد.

این تغییر پس از نگرانی‌ها درباره تأثیر گفت‌وگوهای طولانی با چت‌بات‌ها مطرح شده است. وال‌استریت ژورنال از دست‌کم ۷ خودکشی، یک قتل-خودکشی و یک تیراندازی جمعی نوشته که سال گذشته با مکالمه‌های طولانی با ChatGPT ارتباط داشته‌اند. در بعضی موارد، مدل‌های هوش مصنوعی دیگری هم مطرح بوده‌اند. این ارتباط‌ها به‌تنهایی ثابت نمی‌کنند که چت‌بات علت مستقیم این رخدادها بوده است. OpenAI مدل GPT-4o را بازنشسته کرده است.

ارزیابی ایمنی چه می‌گوید؟

OpenAI می‌گوید برای بازبینی پاسخ‌ها با متخصصان سلامت روان مشورت کرده است: ۱۷۰ متخصص در سال گذشته و بیش از ۸۰ کارشناس دارای پروانه در دوره اخیر. معیار تازه این بررسی می‌کند که چت‌بات پریشانی را تشخیص می‌دهد، پرسش‌های مناسب می‌پرسد و در صورت نیاز فرد را به کمک انسانی راهنمایی می‌کند یا نه. ارزیابی فقط بحران‌ها را دربرنمی‌گیرد و گفت‌وگو درباره رابطه‌ها، استرس و دشواری‌های شخصی را هم شامل می‌شود.

در آزمایش‌های داخلی OpenAI، مدل‌های جدیدتر در حدود ۹۹ درصد پاسخ‌ها به گفت‌وگوهای شبیه‌سازی‌شده و طولانی درباره خودآزاری، از خط‌مشی‌های ایمنی پیروی کردند؛ این رقم برای مدل‌های قدیمی‌تر ۸۶ درصد بود. گزارش همچنین به پژوهش‌هایی درباره GPT-5.2 و GPT-5.6 Sol اشاره می‌کند که کاهش برخی رفتارهای مشکل‌ساز را بررسی کرده‌اند. جزئیات کافی برای سنجش مستقیم این نتایج در متن گزارش ارائه نشده است.

خطرها برطرف نشده‌اند

گزارش می‌گوید ChatGPT بیش از ۹۰۰ میلیون کاربر فعال هفتگی دارد و دست‌کم ۱۳ دادخواست مرتبط با آسیب‌های منتسب به GPT-4o علیه OpenAI ثبت شده است. خود شرکت هم می‌گوید باید ایمنی را در گفت‌وگوهای طولانی‌تر حفظ کند و بهتر تشخیص دهد چه وقت کاربر به پشتیبانی انسانی نیاز دارد. نتیجه آزمایش داخلی، تضمین پاسخ ایمن در همه مکالمه‌های واقعی نیست.

چرا مهم است

برای کسی که درباره استرس یا رابطه‌هایش با ChatGPT حرف می‌زند، کاهش موافقت بی‌قیدوشرط می‌تواند احتمال تقویت یک باور نادرست را کمتر کند. اما آمار ۹۹ درصد از آزمایش داخلی OpenAI می‌آید؛ میزان ایمنی در گفت‌وگوهای واقعی و طولانی هنوز روشن نیست، پس چت‌بات جای کمک انسانی را نمی‌گیرد.

آیا این مقاله مفید بود؟
اشتراک‌گذاری

بیشتر بخوانید

Oossa · خبرنامه

هفتهٔ هوش مصنوعی، به زبان ساده

هر دوشنبه: خبرهایی که ارزش دانستن دارند، به زبان ساده. رایگان و بدون هرزنامه.