NLP Psychometricsとは何か
従来の自然言語処理(NLP)モデルは、テキストから精神的健康状態を予測する際に、何が測定されているのかが不明確でした。文脈知識、感情内容、構文構造など、その測定対象は曖昧です。この課題に対し、私は「NLP Psychometrics」という新しいアプローチを提唱します。これは、テキストからの心理的予測を心理測定学の問題として扱い、予測スコアを解釈可能な言語的証拠に結びつけます。さらに、訓練に使用したテキスト形式だけでなく、多様な形式のテキストにも適用できるようテストすることが重要です。
LLMを用いた検証と分析手法
本研究では、9つの大規模言語モデル(LLM)を「認知デジタルシャドウ」として設定しました。これらのLLMは、制御されたペルソナに基づき、項目ごとにテキストによる説明を付加しながら心理測定アンケートに回答しました。私たちは、これらのテキストから感情プロファイルと構文・意味構造を抽出し、「forma mentis networks」として分析。これらを性格特性や社会人口統計学的変数と組み合わせ、アブレーションされたランダムフォレスト(RF)回帰モデルで分析しました。特に、SHAP(SHapley Additive exPlanations)を用いて、どの特徴が予測性能を駆動し、どの方向に影響を与えたかを特定しています。
予測精度の驚くべき結果
完全なRFモデルは、生活満足度(SWLS)の分散を最大70.8%説明しました。うつ病(PHQ-9)では55.7%を説明し、DASS-21(うつ病・不安・ストレス尺度)においては、うつ病で68.5%、不安で76.0%、ストレスで72.4%という高い説明力を示しています。興味深いことに、社会人口統計学的変数単独では、うつ病、不安、ストレスの有意な分散は説明できませんでしたが、生活満足度においては説明力があり、感情特徴と収入が最も強い予測因子でした。うつ病と不安に関しては、神経症傾向とネットワークトポロジーが支配的であり、両者の間では予測の方向性が逆転する結果も確認されました。さらに、再訓練なしで、RFモデルは低スコアと高スコアのペルソナの日記を最大0.91の相関で分離し、ネットワーク/感情特徴のみを使用して、実際のトランスクリプトから臨床参加者と対照参加者を最大68%の精度で分類できました。
学習コースAI活用アカデミー
コース一覧を見る →
AIが人間の精神状態を予測する。これはもう、営業のトークスクリプト分析に直結します。顧客の感情やストレスレベルをAIが読み解き、最適なアプローチを提案する。私なら即座にこの技術を営業戦略に組み込みます。一次情報を取りに行き、成果をぐるぐる回すだけです。