跳到正文
热点事件历史事件

NVIDIA 提出 ReplaySSM 加速混合模型解码

1 篇报道1 个报道来源3 天前更新

先了解这件事

AI 综述

NVIDIA 提出名为 ReplaySSM 的方法,重新设计混合模型解码时的状态存储方式,目标是加速解码。 这类混合模型把状态空间模型(SSM)层与少量注意力层交错堆叠,NVIDIA 称 Nemotron 3、Qwen3.5 至 Qwen3.8、Kimi-K3、GLM-5.3-Flash 等模型采用该结构,其 SSM 层分别使用 Mamba-2、Gated DeltaNet(GDN)或 Kimi Delta Attention(KDA)。

AI 根据报道生成 · 2 天前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月13日
  1. NVIDIA Technical Blog
    ReplaySSM:重新思考状态存储,加速混合模型解码

    NVIDIA 提出 ReplaySSM,重新思考混合模型的状态存储方式以加速解码。NVIDIA Nemotron 3、Qwen3.5 至 Qwen3.8、Kimi-K3、GLM-5.3-Flash 等混合模型将 SSM 层与少量注意力层交错,SSM 层分别采用 Mamba-2、Gated DeltaNet(GDN)或 Kimi Delta Attention(KDA)。