跳到正文
vLLM Blog· Mistral and the vLLM Team·原文发布· 17 小时前精选AI 评分70

vLLM 实现 Mistral Large 4 Day 0 支持

Day 0 support for Mistral Large 4 on vLLM

AI 导读

vLLM 宣布对 Mistral Large 4 提供 Day 0 支持,该模型为 1T 参数、每 token 激活 49B 的 MoE 原生多模态模型,采用 MLA 加 DSA 稀疏注意力并内置 Pixtral 视觉编码器。

本站提供 AI 导读,完整报道请前往来源网站阅读。

阅读原文 vLLM Blog · vllm.ai
推荐理由

vLLM 官方详解 Mistral Large 4 的架构参数与部署配方,读者可据此评估长上下文、投机解码和 AMD/TPU 支持的实际收益。