生成模型存在内在梯度障碍

Edric Tam、Qingyang Liu、Barbara Engelhardt 和 Ray Bai 的研究证明，将对数凹源分布映射到重尾或多模态目标分布时，生成映射的梯度和 Jacobian 存在内在下界；困难来自传输问题本身，而非特定网络架构或训练方法。目标分布的矩增大或模态间出现低概率区域，会迫使映射梯度增大，形成表达能力与数值稳定性的权衡。 针对密度近似，研究提出双射重参数化，以缓解几何困难、降低生成映射的梯度负担；数值实验支持其理论分析。

AI 根据报道生成 · 1 小时前更新

还没有足够的连续观测数据，暂不绘制趋势。