ULME框架实现文本嵌入与语言建模的真正统一：arXiv新论文提出预测耦合机制
2026年10月24日，arXiv发布论文arXiv:2610.30705v1，提出ULME——一种面向因果解码器型大语言模型的后训练框架，通过预测耦合（predictive coupling）机制，首次实现文本嵌入与语言生成能力的相互增强式统一。该方法在Qwen2.5/Qwen3系列（0.5B–8B参数）上验证有效，MTEB提升3.3–4.1分，同时保持生成任务（MMLU等）性能不降。
推荐理由：该论文直指当前多模态LLM能力割裂的核心问题：嵌入与生成长期由独立模型或仅参数共享的‘伪统一’模型承担。ULME通过可学习插槽与三目标联合训练（含stop-gradient预测损失），使生成过程主动塑造嵌入表征，属架构层面的实质性突破；实验覆盖广、基线强、指标全面，且发布于权威预印本平台，时效性与技术严谨性兼备。