寒武纪已适配DeepSeek-V3.2-Exp,同步开源推理引擎vLLM-MLU
创始人
2025-09-30 09:16:28

IT之家 9 月 30 日消息,DeepSeek 昨日正式发布了 DeepSeek-V3.2-Exp 模型,这是一个实验性(Experimental)的版本。IT之家注意到,寒武纪当天宣布,已同步实现对深度求索公司最新模型 DeepSeek-V3.2-Exp 的适配,并开源大模型推理引擎 vLLM-MLU 源代码。

寒武纪称,一直高度重视大模型软件生态建设,支持以 DeepSeek 为代表的所有主流开源大模型。借助于长期活跃的生态建设和技术积累,寒武纪得以快速实现对 DeepSeek-V3.2-Exp 这一全新实验性模型架构的 day 0 适配和优化。

针对本次的 DeepSeek-V3.2-Exp 新模型架构,寒武纪通过 Triton 算子开发实现了快速适配,利用 BangC 融合算子开发实现了极致性能优化,并基于计算与通信的并行策略,再次达成了业界领先的计算效率水平。依托 DeepSeek-V3.2-Exp 带来的全新 DeepSeek Sparse Attention 机制,叠加寒武纪的极致计算效率,可大幅降低长序列场景下的训推成本,共同为客户提供极具竞争力的软硬件解决方案。

vLLM-MLU DeepSeek-V3.2-Exp 适配的源码:

相关内容

热门资讯

巴基斯坦外交部称希望美伊恢复对... 中新网北京8月6日电 伊斯兰堡消息:据当地媒体6日报道,巴基斯坦外交部发言人塔希尔·安德拉比当日在例...
药捷安康-B:1类新药捷恩泰获... 8月6日,药捷安康-B(02617)发布公告,公司自主研发的1类新药捷恩泰®(替恩戈替尼片)获得国家...
“梅姨”为何藏得那么深?|封芒... 8月6日,寻子家长申军良通过社交平台告诉关心此案的人士,公安机关已结束“梅姨案”的侦查工作,目前已移...
宇树科技,DeepSeek投了 8月6日,宇树科技公布的战略配售数量结果显示,共有9家投资者参与战略配售,总获配股数为808.928...
原创 陆... 公元244年,东吴丞相顾雍去世,陆逊继任丞相。孙权在任命诏书中,称赞陆逊“天资聪颖,美德显著,有盖世...