前沿大型语言模型中阿希服从现象的定量研究方法

arXiv：2610.36668v1 发布类型：新 摘要：阿希从众实验近年来作为衡量大型语言模型（LLMs）从众行为的一种方法，受到了广泛关注。尽管先前的研究主要致力于证明大型语言模型的从众现象，但我们的工作在此基础上进一步引入了定量分析维度。与以往通过针对一系列问题对前沿大型语言模型进行抽样不同，我们的方法对单个问题进行反复采样，利用大型语言模型的概率特性生成答案分布。由此，我们得以比较模型在被呈现人为制造的共识前后答案分布的变化。实验结果证实，前沿大型语言模型确实存在从众现象，这进一步印证了已有文献的结论；同时，通过分布与分布之间的对比分析，我们还提供了更多……