跳到正文
arXiv · Machine Learning· Adam Hollowell·· 10 小时前AI 评分66

Gemma 2 不同规模与指令微调下的情绪表示几何研究

The Geometry of Emotion Representations Across Scale, Depth, and Instruction Tuning

AI 导读

这项研究比较了 Google Gemma 2 2B、9B、27B 的基础版与指令微调版,发现六个模型均呈现核心情绪几何特征。跨模型线性映射在15组配对中仅一次未能将留出情绪排在目标模型对应向量的最近位置;清理后的嵌入表向量在30个有向配对中均达到第1名次。

来源:arXiv · Machine Learning · arxiv.org