跳到正文
arXiv · Machine Learning· Andre Guarnier De Mitri, Giovani Decico Lucafo, Miller Matheus Lima Anacleto Rocha, Diego Furtado Silva·· 8 小时前AI 评分37

CAMEL:通过跨架构掩码嵌入学习构建超轻量级视网膜基础模型

CAMEL: Cross-Architecture Masked Embedding Learning for Ultra-Lightweight Retinal Foundation Models

AI 导读

CAMEL 提出一种跨架构蒸馏框架,通过非对称掩码嵌入学习,将大型教师基础模型的知识迁移至紧凑型轻量级学生模型。该方法在四个数据集上的实验表明,模型在保持准确率的同时大幅降低计算复杂度,适用于硬件资源受限的临床环境。

来源:arXiv · Machine Learning · arxiv.org