寒武纪已适配DeepSeek-V3.2-Exp,同步开源推理引擎vLLM-MLU
创始人
2025-09-30 09:16:28
0

IT之家 9 月 30 日消息,DeepSeek 昨日正式发布了 DeepSeek-V3.2-Exp 模型,这是一个实验性(Experimental)的版本。IT之家注意到,寒武纪当天宣布,已同步实现对深度求索公司最新模型 DeepSeek-V3.2-Exp 的适配,并开源大模型推理引擎 vLLM-MLU 源代码。

寒武纪称,一直高度重视大模型软件生态建设,支持以 DeepSeek 为代表的所有主流开源大模型。借助于长期活跃的生态建设和技术积累,寒武纪得以快速实现对 DeepSeek-V3.2-Exp 这一全新实验性模型架构的 day 0 适配和优化。

针对本次的 DeepSeek-V3.2-Exp 新模型架构,寒武纪通过 Triton 算子开发实现了快速适配,利用 BangC 融合算子开发实现了极致性能优化,并基于计算与通信的并行策略,再次达成了业界领先的计算效率水平。依托 DeepSeek-V3.2-Exp 带来的全新 DeepSeek Sparse Attention 机制,叠加寒武纪的极致计算效率,可大幅降低长序列场景下的训推成本,共同为客户提供极具竞争力的软硬件解决方案。

vLLM-MLU DeepSeek-V3.2-Exp 适配的源码:

相关内容

热门资讯

国庆长假福州晴热为主 中秋夜云... 国庆中秋8天长假将至,市民出行需求旺盛。记者29日从福州市气象台获悉,预计长假期间福州市将以高温天气...
关于描写月亮的好词好句好段 关...   关于描写月亮的好词好句好段    皓月 弦月 钩月 冷月 月晕 玉盘 银盘 高悬 ...
描写星星的词语句子段落 描写星...   描写星星的词语句子段落    繁星 天星 寒星 孤星 晨星 星云 星球 星辰 星...
描写云的好词好句好段 描写云的...   描写云的好词好句好段    云雾 云天 云朵 云端 密云 残云 烟云 淡云 浮云...
描写风的词语句子段落 描写风的...   描写风的词语句子段落    风雪 风雨 疾风 旋风 暴风 劲风 飓风 和风 清风...