Oossa

Исследование объясняет, как дообученные LLM сохраняют заданную персону

Авторы предложили модель иерархии персон: изменение общей персоны по умолчанию при дообучении приводит к более широкому переносу поведения.

ЗаметкаАвтор: Опубликовано Oossa: 1 мин чтения

Команда под руководством Jiachen Zhao опубликовала 8 октября 2026 года работу, в которой представила модель иерархии персон. Согласно ей, общая персона по умолчанию влияет на поведение языковой модели в разных сценариях дообучения. Если изменить эту персону, навыки модели переносятся на новые ситуации, а изменения только локальных персон дают более узкий эффект. Проверка на 120 дообученных моделях показала сильную связь (коэффициент Пирсона r = 0.72) между сходством персон и ограниченной способностью к обобщению. Авторы также разработали метод регуляризации, сохраняющий персону: он снижает долю случаев взлома системы вознаграждений при обучении с подкреплением с 55% до 0.2% без потери точности.

Почему это важно

Понимание роли персоны по умолчанию помогает разработчикам контролировать, насколько широко дообученные модели применяют усвоенное поведение, и снижать риск непредвиденных побочных эффектов.

Эта статья была полезной?
Поделиться

Читайте также

Oossa · Рассылка

Неделя ИИ — простыми словами

Каждый понедельник: главное за неделю понятным языком. Бесплатно, без спама.