阶跃发布开源端到端语音大模型Step-Audio2mini性能惊艳

9月1日,阶跃星辰重磅发布全新开源端到端语音大模型——Step-Audio2mini,凭借卓越性能在国际基准测试中屡创佳绩,强势领跑开源语音模型领域。该模型创新性地将语音理解、音频推理与生成统一建模,在音频理解、语音识别、跨语种翻译、情感与副语言解析、语音对话等多元场景中展现出超凡能力,并率先支持语音原生的Tool Calling功能,实现联网搜索等复杂操作。Step-Audio2mini被业界誉为”听得清楚、想得明白、说得自然”,其开放性模型现已登陆GitHub、Hugging Face等主流平台,向全球开发者开放下载、试用与反馈渠道。

Step-Audio2mini在多项关键基准测试中创下历史新高,综合性能全面超越Qwen-Omni、Kimi-Audio等主流开源端到端语音模型,更在大部分任务上领先GPT-4o Audio。在通用多模态音频理解测试集MMAU上,Step-Audio2mini以73.2的卓越得分摘得开源端到端语音模型桂冠;在衡量口语对话能力的URO Bench测试中,该模型在基础与专业赛道双双斩获开源端到端语音模型最高分;中英互译任务评测显示,Step-Audio2mini在CoVoST2和CVSS评测集上分别取得39.3和29.1的亮眼成绩,显著领先GPT-4o Audio及其他开源语音模型;语音识别任务方面,Step-Audio2mini实现多语言多方言全面领先,其中开源中文测试集平均CER(字错误率)仅为3.19,开源英语测试集平均WER(词错误率)3.50,较其他开源模型领先超过15%。

阶跃发布开源端到端语音大模型Step-Audio2mini性能惊艳插图1

Step-Audio2mini通过突破性架构设计,有效解决了传统语音模型存在的瓶颈,实现”走脑又走心”的智能表现。其采用真端到端多模态架构,彻底突破传统ASR+LLM+TTS三级结构局限,实现从原始音频输入到语音响应输出的直接转换,架构更简洁、时延更低,并能精准理解副语言信息与非人声信号。此外,Step-Audio2mini在端到端语音模型中首创链式思维推理(CoT)与强化学习联合优化技术,能够对情绪、语调、音乐等副语言及非语音信号进行深度理解、逻辑推理并作出自然回应。模型还支持包括web检索等外部工具调用,有效缓解幻觉问题,并赋予模型在多场景扩展上的无限可能。

Step-Audio2mini的强大能力在多个实际案例中得到生动印证。它能精准识别大自然的声音、专业配音,还能实时搜索获取行业最新资讯;支持动态调整语速,从容应对不同场景的对话需求;面对哲学难题时,能将抽象问题转化为极简方法论,展现惊人的逻辑推理能力。开发者可通过以下平台获取该模型:GitHub:https://github.com/stepfun-ai/Step-Audio2Hugging Face:https://huggingface.co/stepfun-ai/Step-Audio-2-miniModelScope:https://www.modelscope.cn/models/stepfun-ai/Step-Audio-2-mini

最新快讯

2026年01月14日

12:50
2025年12月,中国科学院紫金山天文台发布首个高精度数值月球时间历表产品LTE440,相关成果发表于《天文学和天体物理学》。该产品解决了月球与地球时间转换中长期存在的“精度低、计算繁、使用难”问题,实现月球时间可回溯。研究团队利用高精度天体轨道数据,使转换累积误差在千年尺度内不超过1/20000000秒,并开发了便于使用的软件包。目前,LTE440已在线...
12:50
2026年1月,英特尔新一代旗舰工作站处理器至强698X现身Geekbench数据库。该处理器拥有86核心172线程,配备336MB L3缓存,主频达4.6GHz,单核性能较前代显著提升。多核测试因核心数过高参考性有限未作对比。据悉,该系列代号为“Granite Rapids WS”的至强600系列预计于2026年第一季度发布,可能与酷睿Ultra 200...
12:50
2026年1月,在美国CES展会上,技嘉科技以“The World as Prompt”为主题,推出由AI驱动的沉浸式互动体验。参观者可生成专属AI数字分身作为“数字护照”,贯穿整个体验流程。该体验依托技嘉RTX 50系列笔记本电脑及智能AI助手GiMATE,展示人智交互的前沿应用,并凸显硬件设计对下一代AI性能的支持。活动高潮为AORUS MASTER ...
12:50
2026年1月14日,视觉中国与PureblueAI清蓝正式宣布达成战略合作,开启数字营销领域的新篇章。双方将聚焦于“数据供给+GEO营销的全链路服务”这一核心领域,通过深度协同,整合视觉内容资源与AI技术能力,共同打造面向AI时代的智能营销解决方案。这一合作不仅将显著提升品牌客户在数字营销中的效率与精准度,还将推动营销服务模式的创新与升级。 此次合作的具体...
12:50
2026年1月13日,第六批国家组织高值医用耗材集中带量采购在天津开标,涉及药物涂层球囊和泌尿介入类共12种耗材。联采办1月14日公示中选结果,202家企业440个产品入选,投标产品覆盖临床主流需求。此次集采共有227家企业参与,提交496个产品,中选率达88.7%。药物涂层球囊类32家企业全部中选,泌尿介入类195家企业投标,170家入选。具备特殊功能的...
12:50
2026年1月14日,娄底摩骑科技有限公司正式宣告成立,标志着美团在本地生活服务领域的又一重要布局。该公司法定代表人为孙可青,注册资本高达200万美元,彰显了其雄厚的资金实力和发展潜力。从经营范围来看,公司业务涵盖软件开发、网络与信息安全、信息技术咨询、互联网数据服务、企业管理及供应链管理服务等多个领域,展现了其在科技服务与本地生活服务领域的综合实力。 根据...
12:50
1月14日,淘宝网启动年终采购节,活动将持续至2月11日。此次采购节覆盖企业福利、生产加工、办公设备升级及个性定制等多类采购需求。年货礼盒低至8折,天猫超市企业购频道同步上线,部分商品采买低至5折。活动旨在为企业提供一站式年货采购解决方案,助力降本增效,满足春节前集中采购需求。
12:50
2026年1月14日,有色金属新材料生产商炯诚新材宣布完成A轮融资,投资方为湘投高创投。炯诚新材集碱式碳酸镍、氧化镍、氧化钴、碳酸钴、碳酸锂等产品的生产与销售于一体,致力于新能源材料领域发展。本轮融资将用于产能扩张、技术研发及市场拓展。此次融资有助于提升企业核心竞争力,加快在新材料领域的布局。
12:50
2026年1月上旬,随着海南自贸港全岛封关正式生效,离岛免税购物热潮蓬勃兴起。数据显示,当月离岛免税购物人数高达58.5万人次,消费总额达38.9亿元,同比分别激增32.4%和49.6%。这一数据充分印证了封关政策释放的巨大市场潜力,日均购物人数与金额均显著超越封关前水平,展现出海南自贸港强大的消费吸引力。 得益于持续优化的政策环境,海南免税商品品类已实现跨...
12:50
2026年1月14日,国内AI新药研发领域的领军企业Converge成功斩获2500万美元A轮融资,投资方阵容强大,包括知名风险投资机构BVP、TLV Partners,以及多位资深个人投资者。作为一家专注于人工智能赋能药物研发的创新型科技公司,Converge凭借其自主研发的尖端AI平台,正引领着全球药物研发领域的深刻变革。特别是在抗体药物研发领域,该公司...
12:50
2026年1月,阿里速卖通智能插座品类同比增长超50%,吸引BSEED、TNCE等亚马逊头部品牌入驻。这些品牌原在亚马逊平台占据领先地位,现因速卖通推出“超级品牌出海计划”,以低于亚马逊一半的成本助力品牌出海,获得新增量市场。速卖通今年聚焦“品牌出海+海外托管”模式,已在浙江、广东、河南等地开展招商,下一场招商会将于1月22日在深圳举行。此举加速中国智能硬...
12:50
2026年1月14日,AI原生健康技术公司Ahead Health宣布完成600万美元种子轮融资,由RTP Global投资。该公司专注于人工智能驱动的医疗系统研发,并提供预防性检查服务。本轮融资将用于加速产品研发、团队扩充及市场拓展。此次融资标志着资本市场对AI医疗领域持续关注。