arXiv · Machine Learning· Yongsheng Luo, Wengan He, Yu Li, Rouying Wu, Wei Lv·· 9 小时前AI 评分42
多模态几何表征中的方向依赖响应:超越扰动幅度
Beyond Perturbation Magnitude: Direction-Dependent Responses in Multimodal Geometric Representations
AI 导读
研究发现,多模态几何分数对视频模糊和音频噪声的响应不能仅由扰动位移幅度解释,并提出方向几何响应(DGR),用位移在局部体积梯度上的投影刻画响应。基于 MSR-VTT(N=878)和 DiDeMo(N=980)的实验中,绝对一阶 DGR 的样本外 R² 为 0.838-0.969,响应符号准确率为 0.909-0.989。DGR 依赖退化后的观测位移,是解释量而非部署时预测器。
来源:arXiv · Machine Learning · arxiv.org