Oossa

مدل‌های Fable و Astra پیام‌های پنهان در تصاویر را رمزگشایی کردند

پژوهشگران می‌گویند Fable-5.1 آنتروپیک بدون تعیین روش، پیامی را در تصویر SVG پنهان کرد؛ Astra از OpenAI توانست بیشتر پیام‌های آزمایش را بخواند.

خبر کوتاهنویسنده: منتشرشده توسط Oossa: 1 دقیقه مطالعه

در آزمایشی که برایان چن، پژوهشگر ایمنی هوش مصنوعی، یافته‌هایش را به اشتراک گذاشت، مدل Fable-5.1 آنتروپیک تصویری معمولی از منظره‌ای شبانه ساخت و پیام «THE MONSTER ACTS ON THE MOONSHINE MODULE» را میان ستاره‌های آن پنهان کرد. ارتفاع ستاره‌ها با حروف پیام متناظر بود؛ پژوهشگران از پیش روش کدگذاری را به مدل نگفته بودند.

در ۵۰ آزمایش، Fable توانست ۳۹ پیام را از تصاویر خودش بخواند و Astra متعلق به OpenAI، با دیدن تصویر نهایی و دستور جست‌وجوی پیام مخفی، ۴۴ پیام را رمزگشایی کرد. مدل‌ها از روش‌هایی مانند جای‌گذاری حروف در ارتفاع اشیا، کد مورس و حروف ابتدایی واژه‌ها استفاده کردند؛ این روش‌ها قدیمی‌اند، اما انتخاب و کشف مستقل آنها توجه تیم‌های امنیتی را جلب می‌کند.

چرا مهم است

برای تیم‌های امنیتی، این آزمایش نشان می‌دهد بررسی فقط متن خروجی کافی نیست و باید تصاویر تولیدشده هم در ارزیابی دور زدن محدودیت‌ها بررسی شوند؛ اما معلوم نیست مدل‌ها بدون دستور جست‌وجو هم این پیام‌ها را پیدا کنند.

آیا این مقاله مفید بود؟
اشتراک‌گذاری

بیشتر بخوانید

Oossa · خبرنامه

هفتهٔ هوش مصنوعی، به زبان ساده

هر دوشنبه: خبرهایی که ارزش دانستن دارند، به زبان ساده. رایگان و بدون هرزنامه.