arXiv · Machine Learning· Xiaoang Zhang, Mert Kiray, Yordanka Velikova, Manoj Biswanath, Benjamin Busam·· 13 小时前AI 评分53
ProMo3D：探测冻结3D基础模型中的运动线索
ProMo3D: Probing Motion Cues in Frozen 3D Foundation Models
AI 导读
ProMo3D研究冻结3D基础模型token是否包含可解码的运动信息，并提出基于探测的运动蒸馏方法PMD，将成对运动状态兼容性分数转换为稠密运动掩码。PMD仅使用160个YouTube-VOS视频和单张16 GB GPU训练，无需目标基准微调即可零样本迁移到DAVIS、SegTrackv2和FBMS-59。在多视图预训练几何骨干网络上，PMD优于免训练启发式方法，并接近更重的有监督和自监督方法。
来源：arXiv · Machine Learning · arxiv.org