蚂蚁集团开源全模态大模型Ming-Flash-Omni 2.0 实现多模态能力全面突破

微新创想:2月11日,蚂蚁集团正式开源发布全模态大模型 Ming-Flash-Omni2.0。该模型在多个公开基准测试中展现出卓越的性能,尤其在视觉语言理解、语音可控生成、图像生成与编辑等关键领域表现尤为突出。部分核心指标甚至超越了 Gemini2.5Pro,成为当前开源全模态大模型中的性能新标杆。

Ming-Flash-Omni2.0是业界首个实现全场景音频统一生成的模型。它能够在同一条音轨中同时生成语音、环境音效与背景音乐,极大提升了音频内容的创作效率与表现力。用户只需通过自然语言下达指令,即可对音色、语速、语调、音量、情绪以及方言等参数进行精细控制,实现高度个性化的音频生成需求。

在推理性能方面,Ming-Flash-Omni2.0实现了3.1Hz的极低推理帧率,这意味着模型能够在分钟级的长音频生成中保持实时高保真输出。这一突破不仅提升了用户体验,也在推理效率与成本控制上保持了业界领先水平,为大规模应用提供了坚实的技术基础。

业内普遍认为,多模态大模型的发展趋势是走向更加统一的架构,从而实现不同模态与任务之间的深度融合与协同。然而,现实中“全模态”模型往往面临通用性与专精性的矛盾。在特定单项能力上,开源模型通常难以达到专用模型的水平。蚂蚁集团在全模态方向已深耕多年,Ming-Omni系列正是这一长期投入的成果体现。

从早期版本构建统一多模态能力底座,到中期版本验证规模增长对性能的提升,再到最新2.0版本通过更大规模的数据与系统性训练优化,Ming-Flash-Omni2.0将全模态理解与生成能力推向了新的高度。其性能不仅达到开源领先水准,还在某些领域超越了顶级专用模型。

蚂蚁集团开源全模态大模型Ming-Flash-Omni 2.0 实现多模态能力全面突破插图1

此次开源发布,标志着Ming-Flash-Omni2.0的核心能力以“可复用底座”的形式对外开放。开发者可以基于同一套框架,便捷地调用视觉、语音与生成等多模态能力,从而显著降低多模型串联的复杂度与开发成本。这种统一的架构设计,为端到端多模态应用的开发提供了更高效的解决方案。

Ming-Flash-Omni2.0基于Ling-2.0架构(MoE,100B-A6B)进行训练,围绕“看得更准、听得更细、生成更稳”三大目标进行了全面优化。在视觉处理方面,模型融合了亿级细粒度数据与难例训练策略,显著提升了对近缘动植物、工艺细节和稀有文物等复杂对象的识别能力,为视觉理解任务提供了更精准的支持。

在音频生成方面,模型实现了语音、音效与音乐的同轨生成,支持用户通过自然语言对音色、语速、情绪等参数进行精细控制。此外,它还具备零样本音色克隆与定制能力,能够快速适应不同语音风格与需求,极大拓展了音频生成的边界。

图像生成与编辑能力也得到了显著增强。Ming-Flash-Omni2.0在复杂编辑任务中表现出更高的稳定性,支持光影调整、场景替换、人物姿态优化以及一键修图等功能。即使在动态场景中,模型也能保持画面的连贯性与细节的真实性,为图像创作提供了更强大的工具支持。

百灵模型负责人周俊指出,全模态技术的核心在于通过统一架构实现多模态能力的深度融合与高效调用。开源后,开发者可以更方便地利用这一框架,快速构建跨模态的应用场景。这不仅降低了技术门槛,也加速了全模态技术的普及与落地。

未来,蚂蚁团队将持续优化视频时序理解、复杂图像编辑以及长音频生成的实时性,进一步完善工具链与评测体系,推动全模态技术在实际业务中的规模化应用。目前,Ming-Flash-Omni2.0的模型权重与推理代码已在多个开源社区发布,用户也可通过蚂蚁百灵官方平台 Ling Studio 在线体验与调用该模型,开启多模态技术的新篇章。

最新快讯

2026年03月04日

07:37
微新创想:3月11日,苹果将在美国旧金山举办的游戏开发者大会(GDC)上举行三场专题演讲,全面推动其游戏生态建设。首场演讲将聚焦苹果软硬件协同开发,深入探讨如何通过系统级优化提升游戏性能与用户体验。这一环节不仅展示了苹果在硬件与软件整合方面的技术实力,也为开发者提供了宝贵的参考和灵感。 次场演讲由CD Projekt Red带来,将详细解析《赛博朋克2077...
07:37
微新创想:河北维达康生物科技股份有限公司在2026年3月4日前于河北证监局完成IPO辅导备案 辅导机构为中信建投证券 公司成立于2021年 注册资本达到1.4亿元 注册地设在河北省保定市满城区于家庄镇 公司专注于膳食补充剂 天然色素 香料以及医药中间体等合成生物学产业化领域 作为国家认定的“专精特新”小巨人企业 公司在科技创新方面表现突出 牵头承担了河北省“...
07:37
微新创想:2026年3月3日晚,苹果公司正式发布全新Studio Display及Studio Display XDR显示器。两款产品专为Mac优化,普通版起售价11999元,XDR版24999元起。新显示器采用100%再生铝支架,标准版屏幕含80%再生玻璃,系苹果首次达成该环保指标;包装盒为可折叠全纤维设计,便于拆解回收。此举旨在降低运输与回收环节的环境负...
07:37
微新创想:2026年3月3日,谷歌正式推出Gemini 3.1 Flash-Lite模型,宣称为其速度最快、成本效益最高的Gemini 3系列轻量级模型。该模型即日起向开发者开放预览版,可通过Google AI Studio的Gemini API及企业级Vertex AI平台调用。这一发布标志着谷歌在大模型领域持续发力,进一步拓展其在AI应用中的影响力。 G...
07:36
微新创想:2026年3月3日晚,苹果正式推出Studio Display XDR专业显示器。这款27英寸的5K Retina XDR屏幕采用了先进的mini-LED背光技术,带来了卓越的显示效果。其HDR峰值亮度高达2000尼特,确保了在各种光照条件下都能呈现出细腻的色彩与高对比度。同时,该显示器支持120Hz自适应刷新率,为用户提供流畅的视觉体验。 微新创...
06:55
微新创想:3月4日,新闻集团与Meta Platforms宣布达成多年期人工智能内容授权协议。协议为期至少三年,自2026年起生效。该协议标志着两家公司在人工智能领域迈出了重要一步。 微新创想:根据协议内容,Meta将每年向新闻集团支付最高5000万美元。这笔费用将用于获取新闻集团旗下知名媒体如《华尔街日报》《泰晤士报》等的内容授权。这些内容将被用于AI模型...
05:07
微新创想:2026年3月4日,Meta宣布成立Meta Applied AI工程组织,该组织隶属于Reality Labs部门。这一举措标志着Meta在推动人工智能技术实际应用方面迈出了重要一步,旨在加快AI技术在现实场景中的工程化落地。 微新创想:新成立的组织将专注于AR/VR、智能助手以及沉浸式应用等多个关键领域。通过整合公司内部不同部门的AI研发资源,...
02:34
微新创想:2026年3月4日,OpenAI正式推出GPT-5.3即时版网站。该版本即日起面向所有ChatGPT用户免费开放使用。此前的GPT-5.2即时版仍保留在旧版模型选择器中,仅限付费用户访问,为期三个月,将于2026年6月3日终止服务。 此次升级旨在提升响应速度与多模态理解能力,无需额外订阅即可体验最新模型。OpenAI未披露具体技术参数,但强调其在实...
02:34
微新创想:2026年3月4日,荷兰半导体设备制造商ASM国际发布2025年第四季度财报。当季营收达6.98亿欧元,略高于市场预期的6.976亿欧元。这一成绩表明公司在全球半导体市场中继续保持强劲的盈利能力。 订单额为8.028亿欧元,显著高于预期的7.726亿欧元。这显示出客户对ASM国际产品的持续高需求,尤其是在高端制造领域。订单积压也达到了12.5亿欧元...
01:25
微新创想:2026年3月4日,阿波罗全球管理CEO Marc Rowan警示私募信贷市场面临结构性洗牌。当前软件公司贷款违约率上升,叠加人工智能潜在冲击软件行业,引发投资者对1.8万亿美元私募信贷资产质量的担忧。 商业发展公司近期遭遇赎回潮,高管持续回应质疑。此次压力源于底层资产集中度高、估值透明度低及利率环境变化等多重因素。行业正加速分化,风控能力薄弱机构...
00:40
微新创想:3月2日,中兴通讯在西班牙巴塞罗那举行的2026年世界移动通信大会(MWC26)上,正式发布了其首款AI原生手机努比亚M153以及豆包手机助手预览版。这一发布标志着中兴在人工智能领域的重要突破。努比亚M153搭载了骁龙8至尊版芯片,具备强大的计算能力,能够支持自然语言跨应用的多步任务执行,为用户带来更加智能和高效的使用体验。 微新创想:与此同时,中...
00:40
微新创想:2026年3月3日,KDE团队正式发布桌面环境Plasma 6.6.2。该版本作为Plasma 6.6系列的第二个错误修复更新,主要针对显示子系统、远程桌面组件KRdp以及应用商店Discover进行了稳定性提升和交互优化。此次更新解决了多个关键问题,包括DRM后端崩溃、镜像输出异常、KRdp中的线程安全与死锁问题,同时改善了Discover的悬停...