跳到正文
AI NEWS JOURNAL
arXiv cs.LGAI NEWS / JOURNAL

针对哪种策略进行了校准?在干预下的固定世界模型中的保形不确定性

arXiv:2610.35877v1 发布类型:新 摘要:改变部署策略可能会使世界模型的不确定性失效,而同时保持物理转换机制和预测器不变。对于一步预测而言,若源域与目标域的条件机制 $P(Y|X)=Q(Y|X)$ 相同,则该干预可通过事前结果度量的变化 $w(X)=dQ_X/dP_X$ 来识别。对于受策略控制的动力学系统,这一比率可分解为状态占用率与动作倾向性两部分。加权一致性校准能够将边际覆盖率迁移至目标分布;在估计得到比率 $\hat w$ 的情况下,有 $P_Q\{Y \in C_{\hat w}(X)\} \ge 1-\alpha-TV(Q,\hat Q) \ge 1-\alpha-E_P|w-\hat w|$。针对源域与目标域分类器的群体对数损失遗憾同样界定了同一比率的误差。若 $h$ 是其裁剪

AI 自动翻译

摘要:更改部署策略可能会使世界模型的不确定性失效,而同时保持物理转换机制与预测器不变。对于一步预测而言,若源域与目标域的条件机制满足 $P(Y|X)=Q(Y|X)$,则该干预可通过事前结果度量的变化 $w(X)=dQ_X/dP_X$ 来识别。在策略控制的动力学中,这一比率可分解为状态占用率与动作倾向性两部分。加权一致性校准能够将边际覆盖率迁移至目标分布;借助估计的比率 $\hat w$,有 $P_Q\{Y \in C_{\hat w}(X)\} \ge 1-\alpha-TV(Q,\hat Q) \ge 1-\alpha-E_P|w-\hat w|$。针对源域与目标域分类器的群体对数损失后悔值同样界定了该比率的误差。设 $h$ 为其截断后的目标后验,$\rho$ 为目标域先验,$\Delta(h)$ 为群体对数损失后悔,则 $E_P|w-\hat w_h| \le (1/(\rho\gamma))\sqrt{\Delta(h)/2}$。通过精确抵消,可将原本依赖于一般性几率映射界线、阶数为 $\gamma^{-2}$ 的关系改进为 $(\rho\gamma)^{-1}$。我们的实验采用已发布的 DINO 特征世界模型及 Franka 机器人的物理轨迹数据。在最严格的受控状态—动作转移条件下,普通 90% 的一致性置信集覆盖率为 55.0%,而 Oracle 校准与学习到的比率校准分别达到 91.0% 和 90.9%。所学习的代理模型与目标分布的总变差始终控制在 0.9% 以内。校准是相对于部署策略而言的:模型本身可以保持不变,而校准过程则随干预动态调整。我们使用 Lean 4 对分类器后悔分析中所用的有限支撑代数恒等式与因果恒等式进行了形式化验证,其中包括其覆盖率组合步骤。

提交历史

访问论文:

查看PDF

HTML(实验性)

TeX源代码

附加功能

音频摘要

当前浏览上下文:

参考文献与引用

Google 学术搜索

Semantic Scholar

书签

机构

arXivLabs 是一个框架,允许合作者直接在我们的网站上开发并共享新的 arXiv 功能。

无论是个人还是与 arXivLabs 合作的组织,都已认同并践行我们所倡导的开放、社区、卓越以及用户数据隐私等价值观。arXiv 致力于这些价值理念,并且只与同样秉持这些理念的合作伙伴开展合作。

您是否有一个能为 arXiv 社区创造价值的项目构想?欢迎了解更多关于 arXivLabs 的信息。

资料来源

arXiv cs.LG
← 继续阅读全部动态