新研究发现:强化学习中的现有Critic可直接复用为大语言模型置信度估计器
一篇于2026年10月26日发布在arXiv(编号2610.31820v1)的AI研究论文指出,针对采用基于价值的强化学习(value-based RL)训练的大语言模型(LLMs),其已有的Critic模块无需额外训练或数据即可作为高精度、高校准性的置信度估计器使用。
推荐理由该研究揭示了置信度估计与RL中Critic训练在数学本质上的等价性(在正确性结果定义下),并通过跨十余个领域(数学、代码、工具调用、通用推理)的实证验证了复用Critic的有效性与泛化能力;成果对降低LLM可信部署门槛具有直接工程价值。






