小米大模型上线新模式 推理速度突破1000 tokens/s
6月8日晚,小米型上线新小米MiMo技术团队正式上线Xiaomi MiMo-V2.5-Pro-UltraSpeed模式,大模在通用GPU上推理速度突破1000 tokens/s。模式 MiMo-V2.5-Pro-UltraSpeed通过对模型推理系统的推理突破全链路工程能力优化,在不降低模型能力前提下,速度首次把推理速度提升至1000 tokens/s,小米型上线新且无需定制芯片、大模只使用通用GPU即可达成。模式这一突破打破了“快、推理突破强、速度通用 GPU无法兼得”的小米型上线新行业不可能三角。 小米MiMo技术团队表示,大模该突破是模式基于Xiaomi MiMo-V2.5 Pro的SWA架构,叠加了FP4 Experts、推理突破DFlash解码以及TileRT团队的速度执行系统Co‑design,从模型到推理引擎再到GPU执行路径进行了全链路优化。 即日起至6月23日,MiMo-V2-Pro-UltraSpeed模式将采取申请制限时开放,通过申请的用户可接入API 进行体验。 自4月底以来,小米AI在模型能力、推理成本和推理效率三个维度接连取得突破:4月23日, MiMo-V2.5-Pro在全球权威大模型测评平台Artificial Analysis上,获得综合智能指数与Agent指数全球开源模型并列第一;5月27日,Xiaomi MiMo-V2.5系列模型API因技术优化宣布最高降价99%,并同步调整Token Plan计费体系。6月8日,MiMo-V2.5-Pro-UltraSpeed以1000 tokens/s创下万亿参数旗舰模型推理速度新纪录。
- 最近发表
- 随机阅读
-
- 百度智能云发布百度千帆Token Plan企业版,提供GLM
- 豆包上线侧边工作台,支持对话与操作同屏进行
- 区域价格微调,增加出库为主!,行业资讯
- 豆包上线侧边工作台,支持对话与操作同屏进行
- 英国凯特王妃发表声明称其正在接受癌症治疗
- 《霍格沃茨之遗2》传闻再起 罗琳争议引爆新一轮抵制
- 《夜尽之时,最后一杯》——调酒谋杀悬疑游戏新作发布全新预告片
- 低调研发7年后美国AI公司开大:无需EUV量产全新内存
- 今夏饮品盛起,谁将成?汉水绿梦蜂蜜水同类撬动市场!
- 日喀则医疗险怎么买,日喀则人医疗险要怎么选择
- 什么是表面改性 钢化玻璃是由哪几种加工方式制成的,行业资讯
- 《最终幻想14》Switch 2版目标是30帧 吉田:不用担心优化
- 为“黄金大劫案”兜底,中国黄金与加盟商利益共生
- “果”里掘金鼓起群众“钱袋子”_
- 集材作业工是做什么?如何购买团体意外险
- 中空玻璃丁基胶有何特点 中空玻璃丁基胶使用方法,行业资讯
- 索尼又要赌一把 《Fairgames》被曝为免费搜打撤射击游戏 本周末再开测试
- 8月11日,来绿岭·核桃小镇!第八届绿岭核桃节带您寻迹“绿岭核桃”的前世今生!
- 长音频不丢词,行业词不用教,阿里发布Qwen
- 1/8 参数,跑赢 80B 大模型:Boogu
- 搜索
-
- 友情链接
-