DK-VLM用几何位置增强视觉语言模型空间推理
DK-VLM提出双核注意力机制,将3D几何位置而非重建特征直接注入注意力计算,并引入参考系组合监督训练模型跨视角更新空间判断。在六个空间基准上取得最高平均分,VSI-Bench达74.33,同时保持通用视频理解能力。
先用站内已采集内容作答;站内不足时联网检索,每条结论都给出来源链接
3 条 · 点击可看原文全文与中文译文
DK-VLM提出双核注意力机制,将3D几何位置而非重建特征直接注入注意力计算,并引入参考系组合监督训练模型跨视角更新空间判断。在六个空间基准上取得最高平均分,VSI-Bench达74.33,同时保持通用视频理解能力。
论文提出垂直切片 Wasserstein 距离(VSW),用于比较观测本身即为概率测度的元测度(P(P(Ω)))。它用连续测试函数投影内层测度,再用一维 Wasserstein 距离比较,避免高维最优传输的高昂开销,并证明其为有效度量、可度量弱收敛且具维度无关的统计收敛性,还给出粒子梯度用于元测度的梯度传输。
论文发现:在 Verus/Rust 形式化验证中,正确性反馈会抑制规范完整性审计所需的证据。无反馈独立发现产生的认证见证率(59.0%)远超纠正反馈循环(27.1%),且该优势跨模型家族成立。保留这些见证可显著提升规范修复成功率(81.3% vs 62.5%),提示审计与修复目标相悖,应先保留并认证失败证据再修复。
现有资料不足以回答该问题。用户问题所问的是「论文1与现有自主恢复方法在『在线行动 vs 离线规划轨迹』上的差异」,但资料1的主题是 DK-VLM 视觉语言模型的空间推理增强,其摘要中并未涉及任何「自主恢复」「在线行动」或「离线规划轨迹」的内容1;资料2讨论垂直切片 Wasserstein 距离这一元测度度量方法2,资料3讨论 Verus/Rust 形式化验证中正确性反馈对规范完整性审计的影响3,二者同样与自主恢复方法的在线/离线范式无关。 资料中能确认的部分仅有:
以上均无法支撑对「在线行动 vs 离线规划轨迹」差异的论述,建议补充论文1的全文或与自主恢复方法对比的相关资料。