小米大模型上线新模式 推理速度突破1000 tokens/s
6月8日晚,小米型上线新小米MiMo技术团队正式上线Xiaomi MiMo-V2.5-Pro-UltraSpeed模式,大模在通用GPU上推理速度突破1000 tokens/s。模式 MiMo-V2.5-Pro-UltraSpeed通过对模型推理系统的推理突破全链路工程能力优化,在不降低模型能力前提下,速度首次把推理速度提升至1000 tokens/s,小米型上线新且无需定制芯片、大模只使用通用GPU即可达成。模式这一突破打破了“快、推理突破强、速度通用 GPU无法兼得”的小米型上线新行业不可能三角。 小米MiMo技术团队表示,大模该突破是模式基于Xiaomi MiMo-V2.5 Pro的SWA架构,叠加了FP4 Experts、推理突破DFlash解码以及TileRT团队的速度执行系统Co‑design,从模型到推理引擎再到GPU执行路径进行了全链路优化。 即日起至6月23日,MiMo-V2-Pro-UltraSpeed模式将采取申请制限时开放,通过申请的用户可接入API 进行体验。 自4月底以来,小米AI在模型能力、推理成本和推理效率三个维度接连取得突破:4月23日, MiMo-V2.5-Pro在全球权威大模型测评平台Artificial Analysis上,获得综合智能指数与Agent指数全球开源模型并列第一;5月27日,Xiaomi MiMo-V2.5系列模型API因技术优化宣布最高降价99%,并同步调整Token Plan计费体系。6月8日,MiMo-V2.5-Pro-UltraSpeed以1000 tokens/s创下万亿参数旗舰模型推理速度新纪录。
- 最近发表
- 随机阅读
-
- 存量博弈下,什么样的果汁单品值得经销商重仓布局!
- 初代重制版《光环:战役进化》公布 还登PS5
- 库里不在意连胜遭终结 沃顿盼受益主场连续作战
- 唐嫣化身清洁工是作秀吗?唐嫣化身清洁工是什么节目在哪里看?
- 安意保意外险,安意保意外险怎么样?
- 铝合金门窗设计软件指南
- 人寿保险团体意外险怎么保?人寿保险团体意外险保什么?
- 河南将迎来一次重污染天气 下周二最严重
- 当割草机器人遇见世界杯:MOVA打造了一场庭院足球挑战赛
- 科比三节22+6率领7人上双 湖人大胜雄鹿创纪录
- 库里不在意连胜遭终结 沃顿盼受益主场连续作战
- 找不到妻子 丈夫报警称她被绑架
- 30万重疾险性价比高,重疾险保30万好还是50万好
- 鹿晗外套落高铁是真的吗?鹿晗外套落高铁具体情况引网友神评论
- 苏商集团董事局第一副主席赴甘肃武威市考察
- 诺天王14+7帕森斯立大功 小牛力克太阳止两连败
- 玻璃划痕修正剂怎么用 汽车前挡风玻璃划痕怎么修正,行业资讯
- 乔丹冲动吃两T埋隐患 格里芬遭人海车轮战消磨
- 张杰上海演唱会取消 因舞美太炫酷舞台承重出问题要改期
- 白手起家的致富之道|天下雜誌
- 搜索
-
- 友情链接
-