小米大模型上线新模式 推理速度突破1000 tokens/s
6月8日晚,小米型上线新小米MiMo技术团队正式上线Xiaomi MiMo-V2.5-Pro-UltraSpeed模式,大模在通用GPU上推理速度突破1000 tokens/s。模式
MiMo-V2.5-Pro-UltraSpeed通过对模型推理系统的推理突破全链路工程能力优化,在不降低模型能力前提下,速度首次把推理速度提升至1000 tokens/s,小米型上线新且无需定制芯片、大模只使用通用GPU即可达成。模式这一突破打破了“快、推理突破强、速度通用 GPU无法兼得”的小米型上线新行业不可能三角。
小米MiMo技术团队表示,大模该突破是模式基于Xiaomi MiMo-V2.5 Pro的SWA架构,叠加了FP4 Experts、推理突破DFlash解码以及TileRT团队的速度执行系统Co‑design,从模型到推理引擎再到GPU执行路径进行了全链路优化。
即日起至6月23日,MiMo-V2-Pro-UltraSpeed模式将采取申请制限时开放,通过申请的用户可接入API 进行体验。
自4月底以来,小米AI在模型能力、推理成本和推理效率三个维度接连取得突破:4月23日, MiMo-V2.5-Pro在全球权威大模型测评平台Artificial Analysis上,获得综合智能指数与Agent指数全球开源模型并列第一;5月27日,Xiaomi MiMo-V2.5系列模型API因技术优化宣布最高降价99%,并同步调整Token Plan计费体系。6月8日,MiMo-V2.5-Pro-UltraSpeed以1000 tokens/s创下万亿参数旗舰模型推理速度新纪录。
- ·家庭意外险包括哪些?家庭意外险包括哪些范围
- ·央行貨幣政策立場|天下雜誌
- ·1月份泉州一般公共预算总收入完成90.17亿元
- ·平凡人的尋夢園|天下雜誌
- ·100种重疾险需要买?重疾险100种重疾包含哪些?
- ·7三分+两里程碑+砍31分 地球人已无法阻止库里!
- ·新乡县法院执行局干警抓捕的“老赖”竟是网上逃犯
- ·Fami通新作评分:《掘地求升》团队新作仅获31分!
- ·为“黄金大劫案”兜底,中国黄金与加盟商利益共生
- ·執政曙光挑戰民進黨|天下雜誌
- ·27日NBA:奥尼尔赞浓眉哥 詹皇自曝洗澡爱听音乐
- ·京豫名医博士团会诊周 新春快孕送旺宝
- ·好评不断,市场新宠!三大优势,助力天惠奶啤畅销市场!
- ·胡定欣9年勾7男子真的吗?胡定欣个人资料绯闻不断私生活混乱?
- ·戚薇冰箱放香水是怎么回事?堪比商场专柜 其中一瓶珍藏60年
- ·晋江一女工人操作机台 头发被卷入不幸身亡
- ·天工3.1 重磅发布:上线 Skywork Design 与 Dynamic Workflows,给 AI 一张画布和一支军团
- ·汉阴社税联动攻坚社保征缴 打通业务 协同“最后一公里”
- ·汽车玻璃膜什么品牌好 汽车怎么自己贴玻璃膜,行业资讯
- ·汉阴社税联动攻坚社保征缴 打通业务 协同“最后一公里”
- ·张展硕泛太平洋游泳锦标赛200米自由泳摘铜
- ·汉阴社税联动攻坚社保征缴 打通业务 协同“最后一公里”
- ·人身意外险买哪个好?人身意外保险买哪个好?
- ·16日NBA:骑士再添两名伤员 湖人聘新投篮教练
- ·索尼又要赌一把 《Fairgames》被曝为免费搜打撤射击游戏 本周末再开测试
- ·汉阴社税联动攻坚社保征缴 打通业务 协同“最后一公里”
