多模态大模型(MLLM)在应对复杂问题时的表现日益亮眼,但其推理过程往往缺乏灵活性,难以像人类一样进行深度反思和调整策略。面对需要反复尝试的挑战时,这些模型常常陷入“耿直”的困境,无法有效回溯和优化思路。为突破这一瓶颈,上海交通大学与上海人工智能实验室的研究团队联合发起了一项名为 MM-HELIX 的前沿项目,致力于让 AI 掌握长链反思性推理的能力,使其决策过程更趋近人类思维模式。

MM-HELIX 不仅仅是一项技术探索,更是一个完整的智能生态系统。研究团队首先设计了一个被称为“终极考场”的 MM-HELIX 基准测试体系,通过涵盖42种高难度任务来全面评估多模态大模型的反思推理能力。这些任务涉及算法设计、图论分析、逻辑谜题和策略博弈等多个领域,对模型的综合能力提出了严苛要求。测试结果令人深思——即便是最先进的模型,在准确率上也表现平平,尤其当面对多模态输入时,性能更是大幅下滑。这一发现凸显了提升 AI 反思能力的迫切性。

上交大上海AI Lab联手提升多模态大模型反思能力插图

为帮助多模态大模型突破认知局限,研究团队精心构建了 MM-HELIX-100K 数据集,其中包含10万个经过严格筛选的高质量样本。该数据集采用“步骤启发式响应生成”(SERG)流程,通过模拟人类解题思路来引导模型学习反思与复盘的方法。实践证明,这一训练方式不仅能显著缩短解题时间,还能有效避免冗余思考,大幅提升决策效率。此外,团队还创新性地提出自适应混合策略优化算法(AHPO),将其设计为智能导师的角色,在训练过程中逐步引导模型从依赖专家指导转向自主探索。这种动态教学机制实现了双重突破:既提升了模型的准确率,又培养了其独立思考的能力。

经过这一系列技术创新的赋能,搭载 MM-HELIX 算法的 Qwen2.5-VL-7B 模型在基准测试中实现了18.6%的显著准确率提升。这一突破性进展不仅打破了原有模型的性能天花板,更展现出反思能力的强大泛化性,充分证明了 MM-HELIX 项目对人工智能发展的深远意义。这一成果预示着 AI 将在复杂问题解决领域迈出重要跨越,为未来智能系统的进化开辟了新路径。

上交大上海AI Lab联手提升多模态大模型反思能力插图1

最新快讯

2025年11月28日

16:52
近日,一名中国女游客在马尔代夫潜水时遭遇鲨鱼攻击,其后续一系列漠视风险的行为引发了全网对冒险行为边界与安全意识的激烈讨论。据报道,该女子在生理期未采取任何防护措施的情况下执意下水潜水,导致经血扩散,而护士鲨虽相对温顺,却对血腥味极为敏感,这一行为无疑吸引了鲨鱼的注意。更令人震惊的是,为拍摄视频,该女子不仅主动在水中追赶护士鲨,还...
16:52
微新创想11月28日消息,今天14点,小鹏Ultra图灵AI芯片硬件升级正式开启预约!此次升级针对小鹏P7 Ultra与G7 Ultra车型,新增座舱有效算力750TOPS,将是全球AI有效算力最高的座舱。此次芯片升级将大幅提升座舱智能交互、多任务处理等能力,为用户带来更流畅的车载AI体验。据官方信息,本次升级搭载的图灵AI芯片...
16:52
最近,OpenAI 的数据中心合作伙伴正在积累巨额债务,预计与这家初创公司相关的借款总额将接近1000亿美元。这一财务压力虽让合作伙伴们背负重担,但 OpenAI 却在这场资金游戏中乐得其所,无需承担任何财务风险。资金规模:软银、甲骨文、CoreWeave 等已至少举债300亿美元投向 OpenAI 相关数据中心;Blue Owl、Crusoe 等基础设施公...
16:52
11月28日,蔚来发布2025年Q3财报:交付87,071台,同环比分别增长40.8%和20.8%,营收达217.9亿元,双双创历史新高。李斌在11月26日闭门会上强调,蔚来将“老老实实卖车”,聚焦汽车主业。尽管看好AI与机器人前景,他表示蔚来暂不亲自下场,更关注其自研芯片能否赋能第三方机器人。李斌坦言,面对年销3000万辆的中国市场,蔚来仅占1%多份额,必...
16:52
2025年11月28日,卫星核心姿控系统零部件领域的领军企业揽月机电正式宣布成功完成数亿元人民币规模的A+轮融资。此次融资由成都科创投作为领投方强势入场,国信资本、湘江国投、泰亚投资、金鹏基金和鸿富资产等多家知名机构紧随其后参与投资,深蓝资本则担任了本次交易的独家财务顾问。作为国内唯一一家专注于卫星反作用飞轮研发的民营高新技术企业,揽月机电凭借其在微小型商业...
16:52
2025年11月28日,AMD正式宣布其旗舰级专业显卡Radeon PRO W7900D的全球上市,这款显卡基于备受赞誉的RDNA 3架构打造,是备受瞩目的Radeon PRO W7900的精简版。尽管在频率上有所调整,Radeon PRO W7900D依然继承了强大的性能基因,其核心配置中的流处理器数量高达6144个,确保了在专业应用场景中的高效处理能力。...
16:52
2025年11月28日,备受瞩目的临床阶段生物医药企业凯思凯迪正式宣布成功完成总额近3亿元人民币的B轮融资,再次彰显其在创新药领域的强劲发展势头。本次融资由国投先导资本强势领投,同时吸引了浦东创投集团、张江集团、阳光融汇资本、沃美达投资以及临创蓝湾等多家知名机构联合参投,而老股东富汇资本也继续展现对公司的坚定信心,进一步加大投资力度。这一重要里程碑不仅延续了...
16:52
2025年11月28日,针对近期市场盛传的安踏集团拟收购德国运动巨头彪马的传闻,安踏方面正式作出回应,表示将不予置评。这一表态并未平息市场猜测,此前有知情人士透露,安踏体育已将彪马纳入潜在收购目标清单。受此消息刺激,彪马德国股价于11月27日单日暴涨18.91%,创下近一年来的最大单日涨幅纪录。然而,彪马年内股价表现依然疲软,累计跌幅高达54.42%。值得注...
16:52
德国商用车巨头曼恩集团于11月27日正式公布了一项重大人力资源调整计划,旨在应对当前严峻的经营压力。根据该计划,公司将在未来十年内逐步减少德国员工数量,目标裁员2300人,这一数字相当于其德国总员工队伍的20%。值得注意的是,曼恩强调此次裁员将主要通过鼓励员工提前退休等自愿途径实施,坚决避免采取任何强制性措施,以此展现对员工的关怀与尊重。 此次人力资源优化的...
16:52
紫金矿业集团黄金珠宝有限公司近日完成了一项重要的工商变更,其注册资本成功从6.5亿元人民币提升至7.3亿元人民币,增幅达12.31%。这一举措不仅彰显了紫金矿业对黄金珠宝业务的战略重视,也预示着该公司在该领域的持续深耕与扩张。 该公司成立于2011年8月,总部位于中国矿业之都——福建省上杭县,法定代表人为范大游。作为紫金矿业集团旗下核心子公司,黄金珠宝有...
16:52
2023年11月27日,中国昆明川金诺化工股份有限公司与埃及埃尔塞韦迪工业开发公司正式签署合作协议,共同宣布将在埃及苏伊士运河经济区投资建设一座大型磷化工项目。这一战略性合作项目总投资额高达10亿美元,标志着中埃两国在化工领域的深度合作迈入新阶段。项目选址于埃及苏伊士运河经济区,该区域作为全球重要的物流枢纽,将为项目的高效运营提供得天独厚的优势。 该项目建设...
16:21
声明:本文来自于微信公众号 新播场,作者:新播场,授权站长之家转载发布。近年来,短剧领域异军突起的新物种——漫剧,正以惊人的速度席卷市场。3天速成、千元成本、亿级播放,这些令人瞠目的数字背后,是AI技术赋能下漫剧的崛起之路。作为融合小说漫画与真人演绎的创新内容形态,漫剧不仅摆脱了传统短剧对实体布景的依赖,更在AI技术的加持下实现了低成本、高效率的工业化生产,...