全景分割作为计算机视觉领域的基础任务,通过将图像分解为具有语义意义的区域或对象,在医学影像分析、自动驾驶等关键应用中发挥着不可替代的作用。这项任务结合了语义分割的像素级对象分类能力和实例分割的同类实例区分能力,旨在为每个独立实例生成不重叠的掩码并精确标注类别。多年来,研究者们不断优化全景分割模型的性能,尤其关注全景质量指标的提升。然而,传统的闭词汇限制严重制约了模型的实际应用价值,因为数据集细颗粒度标注的高成本导致语义类别数量有限,成为制约全景分割应用推广的关键难题。

随着计算机视觉社区对开放词汇分割技术的探索,这一限制得到了突破性进展。开放词汇分割范式通过利用文本嵌入作为类别标签嵌入,显著增强了模型处理更广泛类别的能力。CLIP等多模态预训练模型凭借其从海量互联网数据中学习到的图像-文本特征对齐能力,在开放词汇分割领域展现出巨大潜力。尽管近期的SimBaseline和OVSeg等两阶段方法尝试改编CLIP实现开放词汇分割,但它们仍然存在效率低下和分割结果与分类不一致等固有缺陷。

针对这些问题,FC-CLIP单阶段统一框架应运而生。该框架在共享的冻结卷积CLIP backbone上无缝整合了掩码生成和CLIP文本对齐分类功能。其核心设计思路在于:冻结的CLIP backbone能够保留预训练的图像-文本对齐特性,为开放词汇分类提供坚实基础;通过添加轻量级解码器,CLIP backbone可转化为强大的掩码生成器;卷积CLIP在输入尺寸放大时表现出优异的泛化能力,特别适合密集预测任务;单一冻结卷积CLIP backbone带来的极简高效设计,相比先前方法大幅减少了参数量和计算量,显著缩短了训练时间,增强了实用性。

在多个数据集上的实验结果表明,FC-CLIP显著提升了状态转换水平。这一开创性的单阶段框架通过统一掩码生成和文本匹配分类过程,为全景分割向开放词汇场景的扩展提供了强大动力,实现了真正的图像理解和交互。这项突破性工作为端到端的单阶段全景分割方法树立了典范,具有巨大的改进和扩展潜力,将推动全景分割技术迈向更广阔的应用领域。

最新快讯

2026年02月11日

17:33
2月9日,斯柯达在欧洲预览全新纯电动城市跨界SUV Epiq,该车将于2026年上半年上市,是品牌最经济实惠的纯电车型。Epiq基于大众MEB+平台打造,采用前轮驱动,车身尺寸为4171×1798×1581mm,轴距2601mm,风阻系数0.275。全系标配LED大灯、5.3英寸数字仪表与13英寸中控屏,搭载LFP或NMC电池(38.5–55kWh),CL...
17:33
2026年2月11日,区块链与现实世界资产(RWA)融合项目RubberVerseX(RVX)宣布完成200万美元战略融资。本轮融资由M2M Capital、HVS Ventures及BD Ventures联合投资。RVX致力于构建数字橡胶经济,通过区块链技术将天然橡胶种植、加工、贸易等实体产业链关键环节上链,提升透明度与流动性。此次融资将用于智能合约审计...
17:33
2026年2月11日,日本开发商Kairosoft宣布经典模拟经营游戏《游戏发展国》在苹果App Store和谷歌Play商店开启限时免费领取活动。该游戏原价4.49美元(约合31.1元人民币),曾于2010年10月9日首发登陆移动平台,此前最早可追溯至1997年Windows版本。玩家将扮演游戏公司创始人,统筹开发、招聘与市场策略,推动企业成长。本次免费...
17:33
2026年1月,中国电解铝行业平均含税完全成本环比降0.6%、同比降19.5%,主因氧化铝与预焙阳极成本下降;同期SMM A00铝现货月均价为23641元/吨,环比上涨1840元/吨。成本回落叠加价格上行,行业平均利润升至7500元/吨。按月均价测算,当月全国在产电解铝产能全部盈利。
17:33
2月11日16时40分,新疆巴音郭楞州尉犁县发生3.9级地震,震中位于北纬40.86度、东经84.07度。此次地震震源深度26千米,属浅源地震。据中国地震台网正式测定,目前暂无人员伤亡和财产损失报告。当地相关部门已启动应急响应,正开展震情核查与风险排查。
17:32
2026年2月11日,蔚蓝锂芯(002245.SZ)董事会审议通过终止参与格林美印尼项目增资扩股事项。公司原计划于2025年10月出资2000万美元,认购目标公司5.95%股权。因格林美调整战略规划,经协商一致,各方签署终止契约书。本次终止系基于战略优化需要,不涉及违约,对公司经营、财务状况及股东权益无重大影响。
17:32
2026年2月11日,沃森生物公告拟联合国投创益、玉溪国有资本及央企乡村产业基金,共同设立云南创沃生物产业投资基金。基金总规模10亿元,沃森生物以自有资金认缴4.5亿元,作为有限合伙人。基金聚焦合成生物制造领域,重点布局合成生物学、生命大健康、生物农业、生物能源、生物材料及技术平台型企业。此举旨在强化公司在前沿生物技术领域的产业协同与战略卡位。
17:32
2026年2月11日,欧洲汽车电池公司(ACC)宣布搁置在意大利和德国建设电池超级工厂的计划。ACC由Stellantis、梅赛德斯-奔驰与道达尔能源合资成立,旨在增强欧洲电动汽车电池供应链自主性。此举源于Stellantis近期因电动车市场需求疲软,计提220亿欧元资产减值,并全面缩减电动化投资。ACC CEO安东尼奥·菲洛萨表示,实际电池产能需求远低于...
17:32
2026年2月11日,Meta向Quest 3用户推送v85公共测试频道(PTC)更新,新增“Surface Keyboard”桌面虚拟键盘功能。该功能利用头显摄像头在任意平整表面投射可交互虚拟键盘与触控板,支持光标移动、点击、拖拽及双指滚动。适用于轻度生产力、网页浏览及消息沟通等场景,但Meta建议大量输入仍使用实体键盘。已加入PTC的用户可在设置→实验...
17:32
声明:本文来自于微信公众号 新莓,作者:翟文婷,授权站长之家转载发布。全民AI运动还在进行时。腾讯元宝的10亿红包雨进程过半,阿里千问免费请客计划也在继续,大家还在用支付宝扫福集福。今年五福变六福,蚂蚁AI健康应用阿福为大家新增健康福以及红包。除此之外,字节、百度等互联网公司也在花式参与其中。种种迹象表明,今年春节的AI含量绝对...
17:32
微新创想:2026年2月10日,QQ迎来27岁生日。这个几乎和中国互联网同龄的产品,从那只“嘀嘀嘀”叫的企鹅开始,一路见证了国内网民从拨号上网到5G时代的全部变迁。在很多人眼里,QQ是“青春纪念册”般的存在。70后在这里学会打字,80后在这里玩“偷菜”游戏、养宠物,90后在这里挂太阳升等级,00后、10后则在这里畅所欲言。 如今,当人们谈论社交产品时,往往第...
17:32
微新创想:据QuestMobile最新数据显示,2月7日,大模型应用千问的日活跃用户数(DAU)已正式突破7352万。这一数字不仅标志着千问在用户规模上的显著增长,也反映了其在人工智能领域日益增强的影响力。 在市场排名方面,千问App近期展现出极高的用户增长势头。随着人工智能技术的不断进步,越来越多的用户开始关注并尝试使用这类创新应用。千问凭借其强大的模型能...