中山大学美团联手研发X-SAM模型 实现单次多对象精准分割技术突破

中山大学、鹏城实验室与美团联合研发的X-SAM图像分割模型近日正式问世,这款创新性多模态大模型在图像分割领域实现重大突破,将传统Segment Anything Model(SAM)的”分割万物”能力升级为”任意分割”,大幅拓展了模型的适应性与应用范围。相较于传统SAM仅能接受单一视觉提示输入的局限性,X-SAM通过突破性的视觉定位分割(VGS)任务框架,实现了对所有实例对象的精确交互式分割,为多模态大语言模型赋予了前所未有的像素级理解能力。

X-SAM的技术架构融合多项创新设计。模型采用统一的输入输出格式,可灵活处理包括文本描述、点标注在内的多种视觉和文本查询输入。其核心的双编码器架构能够深度解析图像内容与分割特征,而创新的分割连接器通过多尺度信息融合显著提升分割精度。尤为突出的是,X-SAM集成了Mask2Former架构作为分割解码器,实现了单次操作即可同时分割多个目标对象,彻底打破了传统SAM仅能处理单一对象的技术壁垒。这一改进不仅大幅提高处理效率,更为复杂场景下的批量分割任务开辟了新路径。

在模型训练方面,研究团队独创三阶段渐进式训练策略,通过逐步增强的学习过程确保模型性能的稳步提升。经过在20余个主流分割数据集上的全面验证,X-SAM在对话生成分割任务和图文理解任务中均取得领先性能表现,充分验证了其技术方案的卓越有效性。X-SAM的问世为图像分割技术发展指明新方向,为构建更智能的通用视觉理解系统奠定重要技术基础。

中山大学美团联手研发X-SAM模型 实现单次多对象精准分割技术突破插图1

研究团队表示,未来将重点探索X-SAM在视频领域的应用拓展,推动图像与视频分割技术的统一化发展,持续突破机器视觉理解能力的边界。这项研究成果不仅在学术领域具有里程碑意义,其在自动驾驶、医疗影像、工业检测等实际应用场景中的巨大潜力也令人期待。随着模型开源和技术推广,预计将全面推动计算机视觉领域的快速发展。

论文地址:https://arxiv.org/pdf/2508.04655代码地址:https://github.com/wanghao9610/X-SAMDemo地址: https://47.115.200.157:7861

最新快讯

2025年11月28日

15:49
11月28日最新报道,近日一位女子在网络上分享了一段令人震撼的经历——她从杭州出发,徒步前往上海,全程一分钱不花,只为体验最真实的生活。根据她发布的视频内容,整个过程充满了挑战与感动。 在徒步过程中,女子曾尝试向一位路人求助。她真诚地说明了自己的情况:"我是徒步从杭州到上海的,这一路上所有的吃喝住问题都得自己解决,能请你帮个忙吗?"然而,这位路人直接拒绝了她...
15:49
微新创想11月28日重磅消息,一加中国区总裁李杰在发布会上详细解读了旗舰新机一加Ace 6T的核心竞争力——独家搭载的电竞三芯架构。这一创新配置堪称"黑科技"武器,由第五代骁龙8旗舰处理器、电竞网络芯片G2以及灵犀触控芯片三颗核心芯片协同工作,为用户带来前所未有的沉浸式游戏体验。 李杰强调,这三颗芯片的全面升级正是解决用户游戏痛点的关键。根据一加持续的用户调...
15:49
近期,网络上流传着“加湿器加板蓝根能防感冒”的说法,引发广泛关注。许多人认为借助加湿器的雾化功能,可以将板蓝根的有效成分释放到空气中,从而达到预防感冒和消毒杀菌的目的。然而,这一观点遭到了多家权威机构的科学反驳。 板蓝根作为一种传统中药材,具有清热解毒、凉血利咽的显著功效,常被用于治疗流感、手足口病等病毒感染性疾病。但值得注意的是,目前尚无充分科学证据表...
15:49
近日,广东茂名发生一起令人痛心的家庭意外事件,引发社会广泛关注。尤先生家中6岁的儿子突然提出想吃火锅的愿望,这份童真的期盼让尤先生感到温馨,便立刻在厨房忙碌起来,精心熬制着浓郁的火锅底汤。然而,当尤先生端着盛满滚烫汤底的盘子准备送往客厅时,一场突如其来的灾难悄然降临。 厨房与客厅之间悬挂的帘子形成了一个隐蔽的视觉盲区,而年仅6岁的孩子因为身形娇小,在尤先生未...
15:49
Skywork AI(瞬息AI)昨日重磅推出全新智能海报设计功能——Nano Banana Pro,无需任何美工或PS技能,只需输入一段文字即可一键生成大片级海报,迅速引爆国内创作者圈。该功能现已全面开放于Skywork官网与App,免费用户每日更可多次免费体验。 一键“读懂你”:整篇Anthropic论文秒变专业海报 实测最硬核玩法:直接将长达30多页的A...
15:49
2025年11月28日,在世界物联网大会交通车联高峰论坛上,中国汽车工业协会副秘书长陈旭发表了关于中国汽车市场发展的权威预测。他透露,今年我国汽车销量预计将突破3400万辆大关,其中新能源汽车销量有望达到1600万辆,汽车出口量也将首次超越680万辆,展现出中国汽车产业的强大竞争力。 数据显示,2025年前十个月我国汽车出口表现尤为亮眼。累计出口561.6万...
15:49
2025年11月,长沙地铁正式推行一项重要安全新规,要求乘客携带充电宝时必须出示3C认证标识。这项新规的出台,主要针对此前发生的充电宝在车厢内冒烟事件,旨在全面提升地铁运行安全水平。为确保乘客出行安全,长沙地铁明确规定,凡无3C认证标识、标识模糊不清或已被官方召回的充电宝,均不得带入车厢。此外,充电宝的额定能量上限被设定为160Wh,每位乘客最多可携带3个充...
15:49
2025年11月28日,韩国——在人工智能技术飞速发展的浪潮中,模型压缩公司Nota AI与全球知名电子巨头三星电子System LSI部门正式达成战略合作,共同为三星最新旗舰移动处理器Exynos 2500提供尖端模型优化技术支持。作为此次合作的核心技术伙伴,Nota AI将凭借其在人工智能模型压缩领域的深厚积累,全面助力三星Exynos AI Studi...
15:49
2025年11月28日,备受瞩目的私营医疗器械企业Restore Medical Ltd正式宣布一项重要人事任命,任命Chris Cleary担任公司董事会主席一职。此举标志着公司迈入新的发展阶段,为未来的创新与扩张注入强劲动力。 作为医疗技术领域的资深领军人物,Chris Cleary此前曾担任全球知名医疗器械巨头美敦力企业发展高级副总裁,拥有超过三十年的...
15:16
微新创想11月28日深度报道,近日,备受关注的反诈网红"反诈老陈"在媒体采访中首次公开了其个人收入状况,引发广泛关注。据他透露,过去三年间总收入约为100万元,其中打赏收入高达80万元,而通过电商卖货的收入则约为20万元。面对外界好奇,老陈坦言"挣得多,花得也多",展现出网红经济背后不为人知的财务压力。 据悉,这位反诈明星近年来在投资方面遭遇重大挫折。他先后...
15:16
近日,昆仑万维重磅推出 Mureka V7.6与 Mureka O2 模型,正式宣告 AI 音乐创作进入全新纪元。这两款旗舰级模型在用户体验和音乐生成效果上实现了突破性飞跃,迅速引发全球瞩目。自3月底 Mureka O1与V6模型问世以来,该系列音乐创作平台已吸引近700万新增注册用户,覆盖超过100个国家和地区,用户口碑持续攀升。在持续迭代升级中,Mure...
15:16
近日,小米创始人、董事长兼 CEO 雷军在一场备受瞩目的媒体专访中,就人工智能(AI)的未来发展趋势及其对传统产业的颠覆性影响发表了深刻见解。雷军明确指出,在未来五年内,AI 将对各行各业产生前所未有的深远影响,并掷地有声地表示:"所有产业都值得用 AI 再做一遍。"这一观点充分展现了 AI 技术的普适性和革命性潜力。 以小米汽车工厂为例,雷军生动地阐述了 ...