跳到正文
AI NEWS JOURNAL
AI, IN PERSPECTIVE

全部 AI 动态

保留完整资讯流,用来源、主题和时间找到你关心的消息。

按发布时间排序

SLICE-Mem:用于高效LLM智能体记忆的显著性门控轻量级信息策展

arXiv:2610.33015v1 发布类型:新 摘要:长期记忆使大型语言模型(LLM)代理能够维持个性化且时间上连贯的交互,但为实现记忆的接纳、提取与组织而反复调用LLM进行推理,会带来显著的成本与延迟。我们提出了SLICE-Mem,一个轻量级的记忆框架,它将基于显著性引导的接纳与基于谓词的信息提取相结合。一个紧凑的分类器用于识别值得保留的用户发言,而基于语义依赖关系的提取器则将被接纳的发言转化为简洁的记忆条目。这一在线处理流程无需调用生成式LLM,同时跨条目的一致性校验被推迟至离线的整合阶段。我们在Memora和LongMemEval-S的每周子集上,使用8B a对SLICE-Mem进行了评估

事件进展与其他报道

Async-RBench:用于LLM智能体中异步任务执行的基准测试

arXiv:2610.32429v1 发布类型:新 摘要:大型语言模型(LLM)代理正越来越多地以异步方式执行任务:主代理在子代理运行的同时继续工作,而任务状态可能在其结果到达之前就已发生变化。主代理必须决定哪些工作需要更新或保留、哪些检查需要重复,同时避免进行被禁止的修改。仅凭最终任务的成功并不能说明这些结果是否被正确处理,而且自然的异步到达现象也难以复现。我们提出了 Async-RBench,一个用于评估 LLM 代理中异步任务执行的基准测试,包含涵盖八种场景的 200 个可执行任务。场景控制器通过预定义的任务状态条件来调控结果的交付,而事件响应契约(ERC)则规定了每种响应应满足的要求

事件进展与其他报道

用于LLM智能体一致性的递归语义分歧

arXiv:2610.33012v1 发布类型:新 摘要:具备工具调用能力的大型语言模型(LLM)智能体,在从相同初始状态出发的多次独立运行中,表现出行为不一致的现象,例如调用不同的工具、产生相互矛盾的输出,或采取截然不同的策略。这种行为上的波动会随时间累积,从而削弱部署的可靠性。现有的评估指标主要通过基于任务完成度的得分来衡量正确性,而未能捕捉智能体在多次执行中的行为一致性。此外,对智能体行为的分析要么停留在词元层面,借助概率分布进行评估;要么聚焦于单次响应层面,采用语义聚类方法,但两者均无法刻画不一致性如何在轨迹的后续步骤中进一步传播。我们提出了递归语义发散(RSD),一种无

事件进展与其他报道

面向集成地面与非地面6G网络中意图驱动的服务编排的知识引导型大语言模型

arXiv:2610.33007v1 发布类型:新 摘要:在集成的地面与非地面(TN/NTN)6G网络中,自然语言服务意图可能存在不完整、模糊或不一致的情况,这使得无约束的大型语言模型生成难以实现面向网络的可靠编排。本文提出了一种知识引导的大型语言模型框架,该框架将语法约束的语义解析与知识图谱驱动的澄清循环相结合,从而为四大典型服务类别生成经过验证、可直接用于编排的服务配置文件。在包含200个样本的意图数据集上,该框架实现了89%的分类准确率和95%的策略有效性,且每条请求平均只需0.66次澄清迭代。与纯大型语言模型基线相比,所提出的框架显著提升了策略的有效性及共

事件进展与其他报道

Nemotron 3.5 Bolt 74B-A9B 24GB:一种用于本地人工智能的视觉-语言混合模型

arXiv:2610.33039v1 发布类型:新 摘要:我们推出了 Nemotron 3.5 Bolt 74B-A9B 24GB,这是一种混合型 Mamba-Transformer 视觉语言模型,可在本地智能体驱动的工作负载中实现每 GB 内存的处理速度与智能性能的最优平衡。该模型源自 Nemotron 3.5 Super VL 120B-A12B 系列,通过结合 Star Elastic 压缩与 2 位量化感知蒸馏技术,适用于内存受限的部署场景。该模型针对推理、智能体工具调用以及网页与终端交互进行了优化。此外,我们还训练了一款名为 LiLiCorr 的投机式起草器,并随模型一同发布,以达到预期的推理速度。最终得到的模型在多项基准测试中,于相同内存占用和速度条件下,其准确率均高于同类领先模型,适用于通用智能体任务。

新闻源配图 · arXiv cs.CV
事件进展与其他报道

社会世界模型评估差距

arXiv:2610.33014v1 发布类型:新 提要:谈判助手无需准确预测对方的反应,也能达成一笔不错的交易。我们探讨的是,针对社会世界模型的评估是否直接检验了这种预测能力。我们对1999年至2026年间发表的113篇相关研究进行了梳理。其中9项主要评估测量的是,当系统或实验者选定某一行动后,真实个体对该行动的反应。仅有2项还把明确的反应预测与实际反应进行了对比。这些研究的预测模型所使用的信息仅限于行动被选定之时,而用于评估的反应数据在拟合过程中已被排除;且两项研究均对干预措施进行了随机化处理。此外,我们对25篇有关语言模型的研究进行了全文核查,未发现任何一项实验同时满足上述条件。其余评估则侧重于当前状态推断、任务成功率或预测准确性等指标。

事件进展与其他报道

超越收益:用于代理技能退役的技能内化度量

arXiv:2610.32322v1 发布类型:新 摘要:LLM智能体从公共技能中心检索技能,这些中心最多可存储约10万条记录,并服务于众多模型。随着模型性能的提升,技能中心必须识别出某一模型已内化哪些技能——即该模型已不再依赖这些技能——并将其退役;然而,目前尚无可靠的方法来衡量技能的内化程度。现有规则仅依据有无某项技能时的性能差异来判定其是否应被退役,而这种差异在技能已被内化的情况下以及当模型和该技能均无法提供相应能力时(我们称此状态为“未被发现”)都接近于零。因此,我们选择暂不退役该技能,而是基于由该技能合成的任务对模型进行评分,并且只有在另一模型确实因该技能而获得提升时,才信任模型的高分——因为近一半的高分往往来自那些并未涉及该技能的任务。

事件进展与其他报道

溶剂:用于多步逆合成的长 horizon 推理

arXiv:2610.32308v1 发布类型:新 摘要:多步逆合成反应需要通过一系列连续的反应步骤,将目标分子逐步转化为可购买的构建模块;近期的研究开始借助大型语言模型(LLM)的推理能力来解决这一问题。在最新进展中,LLM推理已进入长时序阶段:模型能够在相互依赖的各步之间持续追求目标、与环境交互并根据反馈进行调整。这一转变显著提升了LLM的能力,人工智能驱动的数学研究领域也由此取得了突破性进展。在此前沿领域,我们提出了 Solvent,一款拥有80亿参数的LLM,成功将长时序推理扩展至多步逆合成任务。通过两轮后训练课程,Solvent学会了在迭代过程中穿插……

事件进展与其他报道

DMAIC-Bench:面向多阶段分析任务中智能体的自我反思与自我约束

arXiv:2610.32305v1 发布类型:新 摘要:多阶段分析任务要求大型语言模型(LLM)代理利用中间证据来决定是继续、重定向还是停止。自我反思——即代理对其输出进行批判性评估——已得到广泛研究,然而,这种批判性评估并不能说明证据是否确实影响了下一步行动。我们将这一能力称为“自我约束”。现有的代理基准测试大多仅衡量任务完成度或输出质量,而未对这一能力进行检验。DMAIC-Bench 通过围绕精益六西格玛明确的统计前提条件构建的、涵盖四个行业领域中15个工业场景的97个种子任务,对此进行了评估。成对的反事实变体在相同的工作流位置上要求采取相反的动作,从而能够区分有依据的自我约束与无差别的随意停止。我们采用……对执行轨迹进行评估。

事件进展与其他报道

面向历史文献转录的OCR系统实体感知评估

arXiv:2610.33004v1 发布类型:新 提要:光学字符识别(OCR)对于历史档案的数字化至关重要,然而诸如字符错误率(CER)等标准评估指标并不一定能反映诸如姓名、日期和标识符等重要信息是否得以保留。在本研究中,我们从实体层面分析OCR错误,以此作为评估历史文献中OCR质量的补充视角。我们使用了一个公开的基准数据集,包含来自Berrutti档案馆的175份文档,并辅以5,209个经人工标注的实体提及——这些标注将在论文被接收后公布——对序列识别型OCR系统、专为OCR设计的视觉-语言模型以及通用视觉-语言模型进行了比较。除了全局转录准确率之外

事件进展与其他报道

LeafSkill:用于递归LLM智能体的高效叶级动作定位

arXiv:2610.32412v1 发布类型:新 摘要:递归式大型语言模型(LLM)智能体通过分解、执行与环境反馈来解决长周期任务。然而,在生成一个原子级子任务后,它们往往再次调用同一款大型模型,将熟悉的指令转化为可执行的动作。我们观察到,高层规划具有任务特定性,而底层动作的具身化则在不同任务间反复出现,并且能够对照环境允许的动作进行验证。为此,我们提出了 LeafSkill,这是一种外部复用层,它能够检索语义相关的具身化经验,将动作模板绑定到当前对象与可执行动作上,并借助一个轻量级的 17 亿参数选择器来决定采用已绑定的动作,或将未发生变化的子任务交由原始智能体继续处理。技能始终处于外

事件进展与其他报道

前缀键值对的重要性:在循环语言模型中用于自推测解码的RIPE缓存

arXiv:2610.34436v1 发布类型:新 摘要:循环语言模型在每个标记上会运行 $R$ 轮层,因此其键值(KV)缓存为每递归层保存 $R$ 个平面,而自推测解码(先用几轮进行初步推断,再用全部 $R$ 轮验证)会读取所有这些平面。我们发现,前缀键值的影响主要体现在较晚的阶段:在扰动幅度相同的情况下,第 25 至 32 轮的敏感度分别是第 2 至 9 轮的 $e^{15.0}$ 倍(Huginn-0125)和 $e^{12.8}$ 倍(Raven-Llama),且各平面随循环次数呈几何级数逼近最后一个平面,每轮分别达到 0.88 和 0.81。至于是否仅保留最深层的平面即可,这取决于晚期平面的成熟程度:在 Raven 上,仅存储最深层平面与从 bf16 转换为 fp32 的效果几乎无差异;而在 Huginn 上,仅有 1% 的位置就贡献了其误差的 74%。我们将这一发现转化为 RIPE,该方法存储最深层的

事件进展与其他报道

SAGE基准与GAR框架发布:推动多模态语义对齐评估

2026年10月26日,arXiv发布论文arXiv:2610.31838v1,提出Sense-Aligned Grounding Evaluation(SAGE)——一个统一的10候选图像选择基准,并配套训练无关的Gloss-Augmented Reasoning(GAR)框架,用于跨名词、动词和实体中心的多模态接地评估。

新闻源配图 · arXiv cs.CL

推荐理由:该研究首次将VWSD、VerSe和WikiDiverse三类任务统一为术语中心的接地评测协议,引入混淆难负样本与上下文交换诊断机制,并通过实证表明定义增强与约束引导推理的协同可显著提升Hits@1指标(65.90→71.22),为多模态语义对齐提供了更细粒度、可解释的评估新范式。

事件进展与其他报道

SpecMem提出实时工具调用记忆管理机制,提升智能体响应速度

arXiv于2026年10月26日发布题为《SPECMEM: Accelerating Agentic Tool Calling via Live Memory Management》的预印本论文(编号2610.31840v1),提出名为SpecMem的新系统,通过跨会话、在线更新的用户级工具调用记忆管理,显著降低工具调用延迟。

新闻源配图 · arXiv cs.CL

推荐理由:该研究针对当前工具调用智能体在部署中因自回归解码导致的高延迟问题,提出可验证写回、LRU淘汰、副作用门控等关键技术,并在多用户多会话真实查询流上验证了其有效性(最高1.74倍实测加速、27%平均接受token提升),属AI系统工程方向的重要进展。

事件进展与其他报道

查询记忆程度决定古典阿拉伯诗歌检索效果:BM25与稠密编码器表现随查询抽象度显著分化

一项发表于2026年10月26日arXiv的最新研究(arXiv:2610.31821v1)表明,在古典阿拉伯诗歌检索任务中,用户对诗句的记忆残留程度(如是否记得半行诗)比模型能力更关键地决定了检索性能;BM25在“舌尖效应”类查询中优于所有稠密编码器(含8B参数SOTA模型),但在抽象查询中大幅落后。

新闻源配图 · arXiv cs.CL

推荐理由:该研究通过双语料库、三索引模式与双评估协议的系统性基准测试,首次量化揭示了查询抽象度对不同检索范式(词法vs.稠密)的支配性影响,并经人类标注员与开源权重模型双重验证,结论具有方法论普适性与实证稳健性。

事件进展与其他报道

LLM评估中仅用整体F1分数验证自动评分器存误导风险:新研究强调需针对具体提示差异校验

arXiv论文(2610.31678v1)指出,在交互式大语言模型评估中,仅依赖自动评分器的整体准确率或F1分数会掩盖提示特定错误,导致对提示效应的误判;实证显示同一评分器在不同提示下的假阳性率差异巨大(2.6%–33.3%),且表面显著的9.3点效应在双LLM评审下缩至2.3点且不显著。

Validating the Comparison, Not Just the Scorer: Why Overall Accuracy Can Mislead in Interactive LLM Evaluation

推荐理由:该研究基于真实实验数据(6个模型、180个虚构实体问题、6种提示条件),揭示了当前LLM评估中普遍存在的方法论漏洞——将 scorer 整体性能等同于其在关键对比任务中的可靠性。其核心主张(须分别审计各提示、纳入不确定性)具有明确实证支撑和可操作建议,时效性强(2026-10-26发布),来源可信(arXiv预印本平台)。

事件进展与其他报道

新研究揭示LLM数学辅导评估存在严重测量偏差:精确匹配评分低估成效近40个百分点

arXiv于2026年10月26日发布的论文《MisconceptDialogue: Evaluation Criteria Shape Measured Success in LLM Math Tutoring》提出MISCONCEPTDIALOGUE自动化评估框架,基于5000+轮对话测试5种开源小参数LLM(7B–14B)作为数学辅导模型的表现。研究发现,主流的精确匹配(exact-match)评分方式仅得42.1%补救成功率,而经人工校准的LLM裁判评估同一对话达81.3%,差距达39.2个百分点;且该偏差非偶然——四类LLM裁判与200条人工标注结果高度一致(kappa最高0.91)。此外,模型对诊断信息(正确/错误概念)响应几乎无差异,表明其难以有效利用诊断输入。

MisconceptDialogue: Evaluation Criteria Shape Measured Success in LLM Math Tutoring

推荐理由:该研究直指当前LLM教育应用评估方法论的核心缺陷:依赖单一、僵化的自动评分可能严重扭曲真实能力判断;其大规模模拟实验设计、多裁判收敛验证及对诊断-教学耦合失效的实证,为AI教育评估标准化提供了关键警示和可复现的方法论基准。

事件进展与其他报道

研究提出“图式一致性量表”(SCI)评估语言模型信念组织性

2026年10月26日,arXiv发布论文arXiv:2610.31683v1,提出Schema Coherence Inventory(SCI)——一种含96题的强制选择量表,用于检验 persona-conditioned语言模型所被赋予的信念是否真正组织其认知,而非仅触发情绪反应。

The Schema Coherence Inventory: Measuring Whether an Assigned Belief Organizes a Language Model's Cognition

推荐理由:该研究填补了当前对语言模型‘信念内化程度’缺乏可验证测量方法的空白;通过临床专家验证、多模型骨干测试及目标特异性判据设计,提供了首个聚焦认知结构而非情绪表征的评估框架,并开源全部工具。

事件进展与其他报道

TRIAD发布:首个面向全模态歧义消解的多模态大模型评测基准

2026年10月24日,研究者在arXiv发布论文arXiv:2610.30841v1,正式推出TRIAD基准——专用于评估文本、图像与音频三模态协同歧义消解能力的新评测框架。该基准含327个手工构建的三模态样本,覆盖86个场景组和18类跨模态歧义类型。

TRIAD: Benchmarking Omni-Modal Ambiguity in Multimodal Large Language Models

推荐理由:该成果直击当前多模态大模型评测的核心盲区:现有基准多聚焦确定性输入下的感知或推理,而TRIAD首次系统性地以‘模态互补消歧’为评测目标,通过严格设计的留一模态反事实测试,揭示模型(尤其对音频)利用不足、场景级鲁棒性薄弱等关键缺陷,为下一代全模态模型评估提供可复现的诊断协议与分类法。

事件进展与其他报道

研究揭示大语言模型中多文化价值选择偏差:国家与语言线索不可互换

一项发表于2026年10月24日arXiv平台的研究(编号2610.31199v1)发现,当大语言模型(LLMs)同时接收国家身份(系统提示设定)和第二重文化线索(显式命名国家或隐式使用查询语言)时,两类线索对价值判断的影响显著不同:语言线索引发更强但方向相反的偏差,而显式国家命名虽影响较弱,却带来更分化、更贴近目标国价值观的价值变化。

Investigating Multi-Cultural Value Selection Biases in LLMs

推荐理由:该研究基于160万条开放生成响应与World Values Survey(WVS)标准化测试,首次系统区分显式国家标签与隐式语言线索在文化建模中的作用,指出当前将二者等同处理会扭曲对LLM文化适应能力的评估;结果具有方法论启示,且发布时间早于当前日期(2026-10-26),属有效新知。

事件进展与其他报道