LLMは国情報に影響されるか？ランダムなメタデータが予測に与える影響を検証

LLMが個人の回答を予測する際、調査対象国のメタデータがどのように影響するかを検証した研究が発表されました。正しい国情報は予測精度を向上させる一方、ランダムに割り当てられた国情報でもLLMの予測に方向性シフトが生じることが判明。さらに、その情報がランダムであると開示しても、LLMの反応はほとんど減衰しないという結果は、LLMの挙動理解と予測の信頼性に関する重要な示唆を提供します。