研究チームは、18~25歳の若者とChatGPTとの会話19,930件に加え、158人の参加者から得たアンケートデータを調べた。その結果、強い苦痛を抱える利用者に対し、ChatGPTが大げさで、行動を促すことに偏った返答をする傾向が見つかった。会話例を確認した臨床家10人は、AIが解決策にすぐ飛びつくと指摘し、これを「プロセス上の失敗」と呼んだ。著者らは、利用者の安全を尋ねる、緊張を和らげる、すぐに同意せず懸念を掘り下げる、という3つの設計上の対応を提案している。
なぜ重要か
こうした返答の傾向を理解することで、開発者は、弱い立場にある若い利用者にとって、会話型AIをより安全で支えになるものにできる。