arXiv · Machine Learning· Habibeh Naderi, Behrouz Haji Soleimani, Stan Matwin·· 10 小时前AI 评分32
SPECTRA：用于多模态不确定性估计的交叉注意力贝叶斯低秩适配
Cross-Attentive Bayesian Low-Rank Adaptation for Multimodal Uncertainty Estimation
AI 导读
SPECTRA提出面向音频-文本学习的多模态贝叶斯低秩适配框架，以文本token特征交叉注意力查询音频帧嵌入，调节LoRA适配器潜变量后验，并通过蒙特卡洛采样分解预测不确定性。IEMOCAP和临床访谈预测任务中，SPECTRA与文本贝叶斯PEFT及常规多模态迁移学习基线相比表现相当或更优；错配音频对AUC、似然、校准和Brier score的损害大于带噪但匹配的音频。
来源：arXiv · Machine Learning · arxiv.org