据“小米大模型”公众号消息,小米开源首个为推理(Reasoning)而生的大模型「XiaomiMiMo」,联动预训练到后训练,全面提升推理能力,目前MiMo-7B的全系列模型均已实现开源。
在数学推理(AIME24-25)和代码竞赛(LiveCodeBenchv5)公开测评集上,MiMo仅用7B的参数规模,超越了OpenAI的闭源推理模型o1-mini和阿里Qwen更大规模的开源推理模型QwQ-32B-Preview。
小米技术团队表示,MiMo的核心突破在于预训练与后训练阶段的协同优化。在预训练阶段,模型通过挖掘高质量推理语料并合成约2000亿tokens专项数据,采用三阶段渐进训练策略,累计训练量达25万亿tokens。
后训练阶段则引入创新强化学习技术,包括自研的"Test Difficulty Driven Reward"算法和"Easy Data Re-Sampling"策略,有效提升模型在复杂任务中的稳定性。技术团队还开发了"Seamless Rollout"系统,使训练效率提升2.29倍,验证速度加快1.96倍。
大模型是指包含超大规模参数(通常在十亿个以上)的神经网络模型。这些模型基于神经网络结构构成,受到人脑神经系统结构的启发,由人工神经元(节点)和它们之间的连接组成。通过调整这些连接的权重,神经网络能够学习和适应输入数据的模式。当前,全球AI大模型行业正处于技术创新与商业化加速推进的阶段。OpenAI、Google、微软等美国企业在这一领域处于领先地位,主导着生成式AI、自然语言处理等技术的发展,其模型如GPT系列和PaLM等已经得到了广泛应用。
其中,中国科技公司在大模型领域掀起的开源浪潮,正以技术破局之势重塑全球人工智能创新版图。
中国大模型发展经历了三个主要阶段。初期探索阶段(2000年代初至2010年代初)主要集中在基础AI理论和小规模应用的研究,缺乏大规模数据和高性能计算资源。随着2012年深度学习的兴起,进入了快速发展阶段(2010年代初至2020年初),期间国内大企业如阿里巴巴、百度、腾讯和华为开始大力投资AI技术,推动了大模型技术的发展和应用。到了成熟与应用阶段(2020年初至今),中国在自然语言处理和计算机视觉等领域的大模型技术已达到国际先进水平,模型广泛应用于商业、医疗、法律等多个行业。展望未来,预计中国将进一步加强跨模态、多任务学习的应用,提升模型的透明度和安全性,巩固其在全球AI竞争中的地位。

当前全球的人工智能产业处于高速发展期,大模型技术引领着人工智能领域正在迈向新的发展高度。前瞻产业研究院初步测算,到2030年,我国大模型市场规模将超过2200亿元,年复合增速在40%以上。

创新工场董事长兼零一万物CEO李开复表示,在AI技术快速发展的浪潮下,2025年会是AI应用大规模落地的元年。过去两年大模型能力不断提升,在问答能力上已经远超人类。新技术持续突破,数字化AI与真实物理世界将进一步融合。较云计算,AI2.0应用层的爆发周期将缩短到两年内。超大预训练模型的价值将进一步体现在“教师模型”的角色中,其本质将更趋近于大模型时代的基础设施。学习范式正从“人教AI”到“AI教AI”转变。
前瞻经济学人APP 产业观察组
科技部 中国人民银行 金融监管总局 中国证监会 国家发展改革委 财政部 国务院国资委 关于印发《加快构建科技金融体制 有力支撑高水平科技自立自强的若干政策举措》的通知 各省、自治区、直辖市及计划单列市...
英伟达首席执行官黄仁勋周五对媒体表示,科技行业为AI基础设施激增的资本支出是合理、恰当且可持续的。他表示:“其原因是所有这些公司的现金流都将开始增长。” 英伟达股价周五交易时段上涨了7%。 黄仁勋此番...
在新能源汽车竞争加速洗牌的2024年,增程式电动车以116.7万辆的年销量站到聚光灯中央,以同比78.7%的增长率在众多技术路线中“脱颖而出”。增程式电动车正以爆款频出的市场表现,撬动新能源产品结构的...
9月12日,北交所宣布,自2025年10月9日起,北交所将为存量股票启用新证券代码。这意味着,北交所股票将全部切换为920新代码。2023年证监会提出,启用北交所独立代码号段,2024年4月,北交所开...
当地时间7月31日,美国白宫发表声明说,将在白宫耗资约2亿美元新建一个“设计精美、精心打造”的宴会厅,并公布了一组设计图。 白宫网站公布的宴会厅设计图 设计图显示,新建的宴会厅内摆放着金色吊灯和金色...
2月21日,事故车拍卖平台博车网向港交所递交招股书,其业务主要由北京恒泰博车拍卖有限公司(简称“恒泰博车”)及其附属公司进行。 招股书显示,公司2022年估值达31.7亿元,事故车拍卖规模位居国内第一...