跳到正文
热点事件持续更新

llama.cpp b11986 增加 OpenCL IQ2 支持

1 篇报道1 个报道来源5 小时前更新

先了解这件事

AI 综述

ggml-org 发布 llama.cpp b11986,为 OpenCL 增加 IQ2 系列量化格式的初始支持,并为 Adreno 增加相关 dp4a 实现及 GEMM/GEMV 优化。更新还优化了解码和窄批次处理,并提供 Windows arm64 OpenCL Adreno 构建版本。

AI 根据报道生成 · 2 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月30日
  1. GitHub · ggml-org/llama.cpp Releases
    llama.cpp b11986 发布,新增 OpenCL 对 IQ2 系列的支持

    llama.cpp b11986 为 OpenCL 增加 iq2、iq2_s、iq2_xs 和 iq2_xxs 支持。更新还加入 Adreno 的 GEMM/GEMV 与 dp4a 实现,并优化解码和窄批次处理;发布构建包括 Windows arm64 OpenCL Adreno 版本。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。