小米首个推理大模型开源 数学与代码测评超越OpenAI
创始人
2025-04-30 13:48:03

4月30日,小米公司于“Xiaomi MiMo”公众号正式宣布开源其首个专注于推理能力的大模型「Xiaomi MiMo」。小米官方表示,该模型以7B(70亿)参数规模,在数学推理(AIME 24-25)和代码竞赛(LiveCodeBench v5)等公开测评中表现优异,超越OpenAI的闭源模型o1-mini及阿里Qwen2.5-32B等更大规模的开源模型。

小米技术团队表示,MiMo的核心突破在于预训练与后训练阶段的协同优化。在预训练阶段,模型通过挖掘高质量推理语料并合成约2000亿tokens专项数据,采用三阶段渐进训练策略,累计训练量达25万亿tokens。

后训练阶段则引入创新强化学习技术,包括自研的"Test Difficulty Driven Reward"算法和"Easy Data Re-Sampling"策略,有效提升模型在复杂任务中的稳定性。技术团队还开发了"Seamless Rollout"系统,使训练效率提升2.29倍,验证速度加快1.96倍。

值得注意的是,小米官方表示,MiMo-7B在相同强化学习训练数据下,数学与代码领域的表现显著优于当前业界广泛使用的DeepSeek-R1-Distill-7B和Qwen2.5-32B模型。

目前,小米已在HuggingFace平台开源MiMo-7B全系列4个模型,并发布详细技术报告。

【来源:凤凰网科技】

相关内容

热门资讯

国际金银收跌 每经AI快讯,周五(3月20日)纽约尾盘,现货黄金跌3.43%,报4498.31美元/盎司,本周累计...
我国科学家首次发现水稻多年生“... (来源:黑龙江日报)转自:黑龙江日报新华社上海3月20日电(记者张建松 胡喆)“时雨及芒种,四野皆插...
“创赢未来”创业大赛黑龙江省选... (来源:黑龙江日报)转自:黑龙江日报本报讯(记者李播)近日,“创赢未来”2026创业大赛黑龙江省选拔...
“春风行动暨就业援助季”招聘活... (来源:黑龙江日报)转自:黑龙江日报 求职者在了解用人单位的需求。本报记者 苏强摄本报讯(记...
国际能源署的石油稳价术 随着中东局势骤然升温,全球能源市场开始剧烈波动。就在市场恐慌情绪蔓延之际,国际能源署(IEA)3月1...