跳到正文
热点事件持续更新

蚂蚁集团与vLLM联合开源量化推理算子库Humming

1 篇报道1 个报道来源2 小时前更新

先了解这件事

AI 综述

2026年10月21日,蚂蚁集团与vLLM社区联合开源通用量化推理算子库Humming。该算子库采用统一量化表示与轻量JIT编译架构,硬件适配方面支持自Turing架构起的NVIDIA GPU以及平头哥真武810E等硬件。在计算路径上,Humming覆盖了WnA16、W8A8、W4A8和W4A4等多种稠密与MoE计算路径;性能方面,其在H200上的单算子编译时间降至2秒以内。

AI 根据报道生成 · 2 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月21日
  1. vLLM 官方博客精选
    蚂蚁集团与 vLLM 社区开源通用量化推理算子库 Humming

    蚂蚁集团与 vLLM 社区联合开源量化推理算子库 Humming,支持自 Turing 架构起的 NVIDIA GPU 及平头哥真武 810E 等硬件。Humming 采用统一量化表示与轻量 JIT 编译架构,覆盖 WnA16、W8A8、W4A8 和 W4A4 等多种稠密与 MoE 计算路径,在 H200 上的单算子编译时间降至 2 秒以内。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。