9月19日,小米公司正式宣布开源其自主研发的首个原生端到端语音大模型——Xiaomi-MiMo-Audio,这一里程碑式的成果标志着语音技术领域迎来了划时代的突破。五年前,GPT-3的横空出世开启了通用人工智能(AGI)的新纪元,然而语音领域始终受限于对大规模标注数据的依赖,难以实现类似语言模型的少样本泛化能力。如今,小米凭借其创新性的预训练架构和上亿小时的训练数据,成功在语音领域实现了基于 In-Context Learning(ICL)的少样本泛化,并在预训练过程中首次观察到显著的“涌现”现象。

Xiaomi-MiMo-Audio 模型在多个权威评测基准中展现出卓越性能,不仅超越了同参数量的开源模型,更在音频理解基准 MMAU 的标准测试集上超越了 Google 的闭源语音模型 Gemini-2.5-Flash,同时在音频复杂推理基准 Big Bench Audio S2T 任务中超越了 OpenAI 的闭源语音模型 GPT-4o-Audio-Preview。这一系列突破不仅彰显了小米在语音技术领域的深厚积累,更为语音 AI 的发展指明了新的方向。

小米此次开源的 Xiaomi-MiMo-Audio 模型包含多项创新性突破。首先,该模型首次证实将语音无损压缩预训练扩展至1亿小时能够“涌现”出跨任务的泛化性,表现为少样本学习能力,这一成就被视为语音领域的“GPT-3时刻”。其次,小米作为首个明确语音生成式预训练目标与定义的公司,开源了一套完整的语音预训练方案,包括无损压缩的 Tokenizer、全新模型结构、训练方法及评测体系,由此开启了语音领域的“LLaMA时刻”。此外,Xiaomi-MiMo-Audio 是首个将思考过程同时融入语音理解和语音生成过程中的开源模型,支持混合思考模式。

小米开源原生端到端语音大模型Xiaomi-MiMo-Audio引领语音AI新突破插图

小米采取了简洁、彻底且直接的开源策略,旨在加速语音研究领域的快速发展。开源内容涵盖预训练模型 MiMo-Audio-7B-Base 和指令微调模型 MiMo-Audio-7B-Instruct,以及 Tokenizer 模型、技术报告和评估框架。MiMo-Audio-7B-Instruct 模型可通过 prompt 切换 non-thinking 和 thinking 两种模式,强化学习起点高、潜力巨大,可作为研究语音 RL 和 Agentic 训练的全新基座模型。Tokenizer 模型拥有1.2B参数量,采用 Transformer 架构,兼顾效率与性能,通过从头开始训练覆盖超过千万小时语音数据,同时支持音频重建任务和音频转文本任务。技术报告全面展示了模型和训练细节,而评估框架则支持10多个测评任务,已开源至 GitHub。

小米公司表示,Xiaomi-MiMo-Audio 的开源将显著加速语音大模型研究对齐到语言大模型,为语音 AGI 的发展奠定重要基础。小米将持续推进开源进程,期待与每一位同行者携手,以开放与协作的姿态,迈向语音 AI 的“奇点”,共同走进未来的人机交互时代。https://huggingface.co/XiaomiMiMo/MiMo-Audio-7B-Instruct

最新快讯

2025年09月19日

12:09
AI视频生成领域迎来颠覆性突破,Luma AI隆重推出革命性模型Ray3,正式宣告全球首个"推理视频模型"的诞生。这款创新产品凭借其内置的多模态推理系统,彻底重塑了AI视频创作的技术边界,为行业树立了全新标杆。 Ray3的核心突破在于其卓越的智能推理能力。与以往依赖随机生成的传统模型不同,Ray3能够精准理解用户需求,系统性地规划复杂场景,并具备自我评估输出...
12:09
腾讯云官方近日正式宣布,其前沿AI助手腾讯元宝已全面登陆微信公众号和视频号评论区,为用户带来全新的内容消费体验。这一重要升级不仅延续了此前在微信好友列表中的成功布局,更标志着腾讯云在AI内容理解领域迈出了关键性步伐,致力于帮助用户在微信生态的繁杂信息中高效筛选和吸收有价值的内容。 据悉,腾讯元宝凭借其卓越的多模态内容理解技术,能够精准解析视频、推文和评论等多...
12:09
2025年9月17日,备受瞩目的美团配送骑手权益保障协商恳谈会在北京正式拉开帷幕。在中华全国总工会与北京市总工会的悉心指导下,美团企业代表与7位来自全国一线的骑手代表,以及通过线上渠道参与讨论的200余名骑手代表齐聚一堂,就劳动报酬、休息休假、职业发展等核心议题展开深入协商。此次会议不仅是一次重要的沟通桥梁,更是推动平台经济劳动者权益保障迈上新台阶的关键举措...
12:09
以色列无人机配送领域的领军企业Flytrex近日宣布获得全球知名科技巨头Uber的战略投资。作为专注于无人机配送解决方案的创新者,Flytrex致力于为快递企业和大型零售商打造基于云计算的无人机配送追踪与管理平台,通过先进技术赋能合作伙伴高效融入无人机物流网络。此次Uber的战略投资不仅为Flytrex注入了强劲的资金支持,更将显著加速其在技术创新和全球市场...
12:09
2025年9月19日,支付宝迎来重要发展里程碑,其两家核心经营主体公司正式完成更名手续。支付宝(中国)网络技术有限公司正式升级为“支付宝支付科技有限公司”,而支付宝(杭州)信息技术有限公司则更名为“支付宝(杭州)数字服务技术有限公司”。这一系列变更获得上海人民银行批准,标志着支付宝在公司治理结构上迈出关键升级步伐,同时也是其持续推进“双飞轮战略”的重要举措。...
12:09
2025年9月19日,亚马逊正式宣布其多渠道配送服务(MCF)迎来重大升级,将服务范围拓展至SHEIN、Shopify和沃尔玛三大主流电商平台。这意味着上述平台的商家现在可以通过亚马逊的强大物流系统,一站式完成订单的拣货、打包及配送流程,从而显著提升整体履约效率。这一战略举措基于亚马逊此前为eBay、Etsy、TEMU和TikTok Shop等平台提供配送服...
12:09
Linuxiac 专业科技媒体最新报道,Linux Mint 团队于9月18日正式发布了备受期待的 LMDE 7 Beta 版本,这款操作系统以“Gigi”作为代号,为用户带来了诸多令人兴奋的更新。LMDE 7 基于 Debian 13 “Trixie”稳定版构建,同时搭载了最新的 Linux 6.12 内核,并全面整合了 Linux Mint 22.2 的...
12:09
2025年9月18日,安徽申兰华色材股份有限公司的上市申请正式获得北京证券交易所受理,标志着这家专注于有机颜料领域的创新企业迈向资本市场的重要一步。申兰华计划通过本次发行不超过2500万股股票(不含超额配售部分),由申万宏源证券担任其保荐机构,共同助力企业实现高质量发展。 作为国内有机颜料行业的领先者,申兰华长期致力于酞菁蓝、永固紫等核心产品的研发、生产与销...
12:09
2025年9月18日,北交所官网正式披露烟台九目化学股份有限公司招股说明书(申报稿),标志着该公司上市申请已获得官方受理。作为国内OLED前端材料领域的领军企业,九目化学计划发行不超过4,687.5000万股股票,由中信证券担任保荐机构,目标登陆北京证券交易所。公司专注于OLED升华前材料及中间体的研发、生产与销售,凭借卓越的技术实力和产品品质,2024年已...
12:09
2025年9月19日,腾讯元宝正式登陆微信公众号和视频号评论区,为用户带来全新的智能互动体验。这一创新功能允许用户在评论区输入“@元宝+问题”的格式,即可触发智能服务,快速获取所需信息。例如,当用户想要查询“如何查看历史消息”时,只需简单输入指令,元宝便能即时响应,提供详尽的解答。 在特定场景下,用户需要先点击评论框内的@符号,从弹出的列表中选择“元宝”...
12:09
Linuxiac科技媒体报道,Canonical公司于9月19日正式发布了备受期待的Ubuntu 25.10 Beta版本,这款操作系统以"Questing Quokka"作为代号,预计将在10月9日推出最终稳定版。此次更新涵盖了内核、桌面环境、安全防护及企业服务等多个维度的重大改进,为用户带来全面优化的使用体验。 新系统搭载最新的Linux 6.17内核,...
12:09
2025年9月19日,备受瞩目的华为全联接大会HC 2025隆重召开,华为常务董事、云计算业务CEO张平安在会上重磅宣布,CloudMatrix 384 AI Token服务正式全面上线。这一创新服务基于华为最新一代AI服务器架构规划,深度融合昇腾AI云服务升级成果,实现了从384卡超节点到未来8192卡的弹性扩展能力,能够构建规模高达50万至100万卡的巨...