阶跃发布开源端到端语音大模型Step-Audio2mini性能惊艳

9月1日,阶跃星辰重磅发布全新开源端到端语音大模型——Step-Audio2mini,凭借卓越性能在国际基准测试中屡创佳绩,强势领跑开源语音模型领域。该模型创新性地将语音理解、音频推理与生成统一建模,在音频理解、语音识别、跨语种翻译、情感与副语言解析、语音对话等多元场景中展现出超凡能力,并率先支持语音原生的Tool Calling功能,实现联网搜索等复杂操作。Step-Audio2mini被业界誉为”听得清楚、想得明白、说得自然”,其开放性模型现已登陆GitHub、Hugging Face等主流平台,向全球开发者开放下载、试用与反馈渠道。

Step-Audio2mini在多项关键基准测试中创下历史新高,综合性能全面超越Qwen-Omni、Kimi-Audio等主流开源端到端语音模型,更在大部分任务上领先GPT-4o Audio。在通用多模态音频理解测试集MMAU上,Step-Audio2mini以73.2的卓越得分摘得开源端到端语音模型桂冠;在衡量口语对话能力的URO Bench测试中,该模型在基础与专业赛道双双斩获开源端到端语音模型最高分;中英互译任务评测显示,Step-Audio2mini在CoVoST2和CVSS评测集上分别取得39.3和29.1的亮眼成绩,显著领先GPT-4o Audio及其他开源语音模型;语音识别任务方面,Step-Audio2mini实现多语言多方言全面领先,其中开源中文测试集平均CER(字错误率)仅为3.19,开源英语测试集平均WER(词错误率)3.50,较其他开源模型领先超过15%。

阶跃发布开源端到端语音大模型Step-Audio2mini性能惊艳插图1

Step-Audio2mini通过突破性架构设计,有效解决了传统语音模型存在的瓶颈,实现”走脑又走心”的智能表现。其采用真端到端多模态架构,彻底突破传统ASR+LLM+TTS三级结构局限,实现从原始音频输入到语音响应输出的直接转换,架构更简洁、时延更低,并能精准理解副语言信息与非人声信号。此外,Step-Audio2mini在端到端语音模型中首创链式思维推理(CoT)与强化学习联合优化技术,能够对情绪、语调、音乐等副语言及非语音信号进行深度理解、逻辑推理并作出自然回应。模型还支持包括web检索等外部工具调用,有效缓解幻觉问题,并赋予模型在多场景扩展上的无限可能。

Step-Audio2mini的强大能力在多个实际案例中得到生动印证。它能精准识别大自然的声音、专业配音,还能实时搜索获取行业最新资讯;支持动态调整语速,从容应对不同场景的对话需求;面对哲学难题时,能将抽象问题转化为极简方法论,展现惊人的逻辑推理能力。开发者可通过以下平台获取该模型:GitHub:https://github.com/stepfun-ai/Step-Audio2Hugging Face:https://huggingface.co/stepfun-ai/Step-Audio-2-miniModelScope:https://www.modelscope.cn/models/stepfun-ai/Step-Audio-2-mini

最新快讯

2026年01月14日

11:17
声明:本文来自于微信公众号 新播场,作者:场妹,授权站长之家转载发布。在小红书看笔记,也要收费了?近日,小红书被曝内测“付费笔记”新功能,这项功能针对摄影师、画师及长文章创作者,设有三种付费模式:高清原图付费下载、单篇笔记付费阅读和笔记合集付费解锁。小红书悄然推开内容付费的大门,试图在广告与电商之外,为创作者开辟直接向用户收费的...
11:17
2026年1月14日,沃尔玛与谷歌宣布达成合作,在Gemini中推出全新AI购物功能。当用户使用Gemini搜索时,系统将根据场景推荐沃尔玛及山姆会员店的商品。若用户绑定沃尔玛账户,Gemini可基于其历史购买记录智能推荐互补商品,并支持直接合并至现有购物车完成结算。此举旨在提升购物便捷性与个性化服务水平。
11:17
AOC于2026年1月13日震撼发布全新电竞显示器——25G41SE/WS,为游戏玩家带来极致的视觉体验。这款显示器采用24.5英寸Fast IPS面板,以1920×1080的分辨率呈现细腻画面,原生刷新率高达300Hz,更可通过超频技术达到310Hz的惊人刷新速度,确保游戏过程中画面流畅无卡顿。凭借VESA DisplayHDR 400认证,该显示器在HD...
11:17
2026年1月14日,国内钨精矿价格突破每吨50万元,APT价格升至73万元以上,钨粉价格接近120万元。此次价格上涨主要受供需紧张及成本上升影响,反映出稀有金属市场持续升温。业内分析认为,短期内钨价或将维持高位运行。
11:17
2026年1月14日,赛德卫星宣布完成B轮融资,由中国科学院空天信息创新研究院和西部证券联合投资。赛德卫星位于湖南北斗产业园,是“1+2+3+N”体系中的核心产业枢纽,专注于小、微、纳卫星平台与整星研发制造。公司具备年产超150颗50至500千克级小卫星的能力,采用脉动流、信息流、物料流“三流合一”的柔性化生产模式,可提供定制化、批量化的一站式卫星制造服务...
11:17
2026年1月14日,谷歌宣布推出新一代开源医疗AI模型MedGemma 1.5,增强对医学影像的支持。同时发布的还有开源医疗语音转文本模型MedASR。两款模型旨在提升临床工作流程效率,支持全球开发者和医疗机构免费使用,推动人工智能在医疗领域的应用与发展。
11:17
2026年1月14日,受AI热潮推动,日东纺生产的高端电子级玻璃纤维布供不应求,苹果、高通争相采购。该材料用于芯片基板和PCB板,苹果已派员驻扎三菱瓦斯化学,确保BT基板原料供应;高通则接触日本小型供应商莜麦化学,寻求替代方案。目前三菱瓦斯化学正与客户协商应对供应紧张局面。
11:17
声明:本文来自于微信公众号 壹娱观察,作者:王心怡,授权站长之家转载发布。12月底,一波剧粉涌进了上海豫园。有人兴致勃勃与所追剧集的剧集场景、角色立牌合照;有人一袭古风造型,主打一个沉浸式游园;有人在社交平台再次安利一下自己的心头好;也有人遗憾未能到场,只好在评论区询问是否有人能帮忙购买周边……当一批批如《藏海传》《凡人修仙传》...
11:17
2026年1月14日,海关总署表示,2025年我国人工智能相关产品贸易趋势与全球基本同步,呈现快速增长。在全球AI贸易增长约两成的背景下,我国AI中间品进口显著,激光雷达、电脑零部件进口分别增长超20%和20%。光收发模块、大型变压器、储能电池等出口分别增长近60%和18.8%。终端方面,搬运、焊接机器人出口增速均超60%,广泛应用于海外基建;智能手表、智...
11:17
2026年1月14日,万蚁归科技宣布完成1000万元天使轮融资,由登事利有限公司独家战略投资。万蚁归科技是一家聚焦多产业融合的生态建设商,依托AI算力平台与大数据系统,推动传统产业数字化转型。公司独创“酱酒游戏化”链游生态,融合区块链、元宇宙与大数据技术,助力区域特色产业升级。本轮融资将用于AI算力平台升级、核心技术研发及链游生态的市场拓展,加速构建“技术...
11:17
2026年1月14日,无人运输全栈解决方案提供商大块头智驾宣布完成B++轮融资,由南沙产投基金、云和资本共同投资。该公司拥有32年军工自动驾驶技术及主机厂造车经验,具备“车、路、云一体协同”能力,首创浸入式“人机共驾”模式,致力于为智慧矿山提供智能化运输工具。本轮融资将用于技术研发与商业化落地,进一步巩固其在无人运输领域的领先地位。
11:17
2026年1月14日,姜歌机器人宣布完成B轮融资,投资方为山东产投。姜歌机器人专注于美妆、鞋服、医药等领域的仓储物流AMR机器人解决方案。与传统AGV不同,其AMR产品可在不中断仓库运营、无需更换货架的情况下完成部署,适配现有仓储环境,助力存量市场智能化升级。本轮融资将加速公司技术研发和市场拓展。