卜卦问事面壁小钢炮4.0发布:性能比肩 Qwen-3-8B,极限220倍提速
卜卦问事 新浪科技讯 6月10日下午消息,近日,面壁智能第四代“面壁小钢炮” MiniCPM4.0 端侧模型(代号“前进四”)发布。据悉,第(⚫)四代小钢炮拥有 8B 、0.5B两种参数规模,实现了同级最佳的模型性能。可让长(👜)文本、深思考在端侧真正跑起来,实现220倍极限加速。
卜卦问事 其中,MiniCPM 4.0-8B 模型为(⛄)稀疏注意力模型,在MMLU、CEval、MATH500、HumanEval等基准测试中,以仅22%的训练开销,性能比肩 Qwen-3-8B、超越Gemma-3-12B。MiniCPM 4.0-0.5B在性能上,也较更大的Qwen-3-0.6B、Llama 3.2实现仅2.7%的训练开销,一半参数性能翻倍,并实现了最快 600 Token/s的极速推理速度。
相(🤯)较于Qwen-3-8B、Llama-3-8B、GLM-4-9B等同等参数规模(🤖)端(🚞)侧模型,实现了长文本推理速度5倍常规加速以及最高 220倍加速(显存受限极限场景下测出),让端侧模型长文本推理“快如闪电”。面壁智能联合创始人兼首席科学家刘知远在与新浪科技沟通中表示,“最高220倍加速(♓),其实(🐬)是建立在(🚁)我们模型(📩)架构、数据治理、软硬件结合、训练等方面全(⏹)栈(🐲)创新优化(🚐)成果之上的。”
刘知远指出,220倍的加速看上去比较夸张,但本身其实存在一个特殊性——由于MiniCPM4.0 在处理更长序列的数据时,可以更好地去处理Transformer架构带来的内存爆炸问题,避免了长(🎺)序列数据处理带来的内存占用倍增,而同尺寸的Qwen-3-8B、Llama-3-8B等模型(👹)并未就此进行优化,因此MiniCPM4.0有了突出(⤵)的表现。
据悉,MiniCPM 4.0 模型采用的InfLLMv2稀疏注意力架构改变了传统 Transformer 模型的相关性计算方式,有效摆脱了逐字重复计算的低效,将稀疏度从行业普遍的40%-50%,降至极致的5%,注意力层仅需1/10的计算量即可完成长文本计算。且对算子底层重写,进一步加速提升,并使得对文本相关性精准性大大提升。
值得一提的是(🖼),DeepSeek 使用的长文本处理架构NSA(Native Sparse Attention)也引用并采用了与InfLLM相同的分块注意力计算思路,但其对于短文本的推理较慢,InfLLMv2则很好地解决了NSA在短文本推理上的短板。
在缓存(🍜)消耗上,MiniCPM 4.0-8B在 128K 长文本场景下相较于Qwen3-8B仅需 1/4 的缓存存储空(🔬)间。在速度、性能飙升的同时,又做到了模型极致压缩,让端侧算力不再有压力。
卜卦问事 据悉,基于 8B 版本,面壁智能已微调出两个特定能力模型,分别可(🧔)以用作 MCP Client 和纯端侧性能比肩Deep Research的研究报告神器MiniCPM4-Surve。截至目前,面壁小钢炮 MiniCPM 系列全平台下载量累计破1000万。(文猛)
相关链接:
- 瑞声科技2024年业绩大增声学业务全年收入破80亿
- 按照年份命名,又有传闻称苹果 WWDC25 将发布 iOS 26 / macOS 26
- 荣耀 400 手机维修备件价格公布:屏幕优惠价 809 元,电池 279 元
- 今年已有8位两院院士出任大学校长
- 宝马下一代 X5 曝光:V8 混动 + 纯电双线并进
- 未来三天可能发生地磁暴,2日左右我国北部有机会出现极光
- 门店 239 元 → 官方 23 元:森马男女休闲短裤 1~2 折清仓再发车
- 伦敦去年报告 8 万起手机失窃案,议员指责苹果、谷歌等巨头从中牟利
- 比亚迪各车型 5 月销量公布:含 4617 辆腾势 N9、5598 辆方程豹钛 3
- 微软发布 Win11 Beta 26120.4230 预览版:新增“快速机器恢复”功能
相关新闻
- 卜卦问事伊朗外交部发言人:尚未就伊美核问题会谈做出“最终决定”详细阅读
中新社北京6月14日电 德黑兰消息:伊朗外交部发言人巴加埃14日就原定于15日举行的新一轮伊朗与美国核问题间接会谈表示,伊方尚未做出“最终决定”。...
2025-06-1588
- 详细阅读
- 卜卦问事我国新增10家国家考古遗址公园详细阅读
中新网6月14日电 据国家文物局微信公众号14日消息,国家文物局近日发布《国家文物局关于公布10家国家考古遗址公园名单的通知》,10家单位列入国家...
2025-06-15109
- 卜卦问事美国海军陆战队进驻洛杉矶开始执勤详细阅读
中新社洛杉矶6月13日电 (记者 张朔)美国军方13日证实,约200名海军陆战队士兵已进驻洛杉矶,即日起开始执行保护联邦机构和人员安全任务。...
2025-06-15110
- 卜卦问事两岸嘉宾厦门恳谈“智慧社区”详细阅读
中新社厦门6月13日电 (林永传)第十七届海峡论坛·两岸社区服务恳谈会开幕式13日在厦门举行。来自台湾近20个社团以及海峡两岸社区工作机构代表、智...
2025-06-15129
- 卜卦问事重温旧时记忆 “转角遇眷你——眷村文化记忆展”台北开幕详细阅读
中新社台北6月12日电 (记者 张晓曦)“转角遇眷你——眷村文化记忆展”12日在台北开幕,展览以沉浸式方式呈现,通过实物、影像等形式,再现眷村的旧...
2025-06-15143
- 卜卦问事Meta入股49%后,AI独角兽Scale遭遇客户流失潮,谷歌带头"逃离"详细阅读
炒股就看金麒麟分析师研报,权威,专业,及时,全面,助您挖掘潜力主题机会! 来源:华尔街见闻 一场价值290亿美元的交易,本应是AI数据独角...
2025-06-15132
- 卜卦问事Labubu会是“下一个Hello Kitty”?详细阅读
转自:南湖晚报 NEWS 最近,泡泡玛特旗下的Labubu爆火,可谓“一娃难求”。这只竖着耳朵、有九颗尖牙、外表邪魅狂狷的小怪兽让不少人上...
2025-06-15148