跳到正文
热点事件持续更新

AMMA提出面向百万Token长上下文的多芯粒内存架构

1 篇报道1 个报道来源8 小时前更新

先了解这件事

AI 综述

Zhongkai Yu 等研究作者提出多芯粒内存中心架构 AMMA,面向百万 Token 长上下文 Attention 服务,通过以 HBM-PNM cubes 替代 GPU 计算芯粒,提升解码阶段内存受限型 Attention 的可用内存带宽。研究评估显示,相较 NVIDIA H100,AMMA 的 Attention 延迟降低 15.5 倍,能耗降低 6.9 倍。该研究已被 MICRO 2026 接收。

AI 根据报道生成 · 2 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

11月2日
  1. arXiv · Machine Learning
    AMMA:面向 1M Context 低延迟 Attention 服务的多芯粒存储中心架构

    AMMA 提出一种面向百万 Token 长上下文 Attention 服务的多芯粒存储中心架构,以 HBM-PNM cubes 替代 GPU 计算芯粒,针对解码阶段的内存受限型 Attention 提升可用内存带宽。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。