这一瓶颈如今被打破。小米正式开源首个原生端到端语音模型——Xiaomi-MiMo-Audio，它基于创新预训练架构和上亿小时训练数据，首次在语音领域实现基于 ICL 的少样本泛化，并在预训练观察到明显的“涌现”行为。
今天上午，小米发布了其首个开源推理大模型-Xiaomi MiMo。通过 25 T 预训练 + MTP 加速 + 规则化 RL + Seamless Rollout，让 7 B 参数的 MiMo-7B 在数理推理和代码生成上赶超 30 B-32 B 大模型，并完整 MIT 开源全系列与工程链，给端-云一体 AI 落地提供了“以小博大”的新范例。
12月26日，界面新闻独家获悉，小米正在着手搭建自己的GPU万卡集群，将对AI大模型大力投入。小米大模型团队在成立时已有6500张GPU资源。
AI圈的大新闻，雷总在线挖人，小米要发力大模型了！
小米大模型第二代来了！ 相比第一代，训练数据规模更大、品质更高，训练策略与微调机制上也进行了深入打磨。
大模型推理速度提升50%以上，还能保证少样本学习性能！
2023年4月，由王斌牵头负责，小米技术委员会AI实验室大模型团队负责人栾剑带队，在小米内部正式成立了一支自研大模型团队。小米内部认为，轻量级模型亦有其存在的市场空间，且在某些特定任务上相比千亿大模型亦能具备一定的优势。
