该研究探讨了大语言模型(LLM)人格评估中一个被忽视的问题:传统方法仅依赖聚合分数,忽略了回答内部的相关性结构。研究者通过IPIP-50问卷,在GPT-4o上模拟美国和华裔美国人两种人格,操控问题顺序,并利用SPD流形分析几何结构。结果发现人格表达由两个可分离成分构成:聚合特征(如大五人格分数)在随机化下下降21%,但保持框架稳健;几何特征在框架错位时崩塌42%,但在共享框架下恢复至84%,优于聚合特征的76%。这种崩塌-恢复模式表明人格几何并非内在固有,而是依赖框架的协调模式,编码了聚合无法捕捉的信息。研究提出LLM人格的双重本质框架,强调评估需考虑框架依赖性,挑战了静态人格特质的传统观念。
| LLM Persona | 大型语言模型模拟的人格特征或角色表现。 |
| SPD manifold | 对称正定矩阵构成的流形,用于分析相关矩阵的几何结构。 |
| Big Five scores | 大五人格模型中的五个维度得分,用于描述人格特质。 |
| frame-dependent | 依赖于问题呈现顺序或上下文框架的特性。 |
| IPIP-50 | 国际人格项目库的50项问卷,用于测量大五人格。 |
📱 每天一份 AI 前沿日报
关注公众号,每天 09:00 推送 · 不错过任何重磅