金融相談テストでAIチャットボットが重要事実を見落とす

Vals AIとNextLadder Venturesは2026年11月13日、低所得者向けの金融相談を想定した256のシナリオで、汎用AIモデル28種類を評価したベンチマークを公表した。モデルは、収入や世帯人数などの基本情報を確認する前に助言することが多かった。最も優れたモデルでも、相談者に関する重要情報の約5分の1を聞き漏らし、チャットの10件に1件では誤った前提に基づいて回答した。ChatGPTとGeminiの無料版は、危機的な状況に関する相談のおよそ半数で重要な点を見落とした。