面向大语言模型可靠性检测的表征签名自适应迁移
arXiv:2610.33442v1 发布类型:新 文摘:据报道,大型语言模型(LLMs)容易出现包括幻觉和推理错误在内的可靠性问题。现有的质量检测器能够基于内部表征以相当高的准确率预测不可靠的输出。然而,这些检测器的训练通常需要大量特定领域的标注数据,这限制了它们在新领域的适用性。我们提出通过在相关领域之间迁移表征签名来应对这一挑战。具体而言,我们构建了一个统计框架,首先为每个领域提取低维表征签名,然后利用交叉拟合学习各领域特定预测器的组合权重。这些权重会根据源领域各自的预测相关性进行自适应调整。