微软Copilot深度集成Windows11 推出语音控制屏幕分析本地自动化功能

微软正加速推进其人工智能战略布局,将 Copilot 智能助手深度整合为 Windows 11 操作系统的核心组件,通过推出一系列创新生成式 AI 功能,致力于重塑用户与个人电脑的交互体验。这些新功能覆盖语音控制、屏幕内容智能分析以及受限制的本地自动化代理应用,微软的目标是将 Copilot 打造成为用户与 PC 交互的主要入口。

“嘿,Copilot”语音控制成为主流交互方式
用户现在只需说出唤醒指令”嘿,Copilot”即可快速启动 Windows PC 上的 Copilot 智能助手。该功能设计为可选模式,激活后会同步显示麦克风图标及音频信号强度指示。微软通过数据分析证实,采用语音交互的用户与 Copilot 的互动频率是文本用户的整整两倍,充分印证了语音交互更高的用户粘性。会话支持自动结束或通过”再见”指令手动终止。为兼顾不同用户需求,Copilot 将被新增至 Windows 任务栏,特别设计了一个集成语音与视觉工具的专用按钮,用户可通过语音指令直接访问 Windows 系统设置。同时微软也计划提供纯文本交互选项,满足不希望开口说话的用户群体。

Copilot Vision实现实时屏幕分析与情境化辅助
“Copilot Vision”功能现已面向全球所有支持 Copilot 的设备全面启用。该技术能够实时分析屏幕显示内容,在用户进行照片编辑、游戏或 Office 办公等操作时提供精准的情境化辅助。微软强调,Copilot Vision具备处理和分析 Word、Excel 及 PowerPoint 文档的完整能力,可为用户带来显著的生产力提升体验。

” Copilot Actions”开创有限自主本地代理应用
微软还特别推出名为” Copilot Actions”的测试功能,赋予 Copilot 在本地计算机上执行简单任务的权限,例如搜索 PDF 文件或批量整理照片等。该功能将首先通过 Copilot Labs 平台以预览版形式,向 Insider Program 会员开放测试。用户可实时监控 Copilot 的工作状态,并在必要时进行人工干预。微软坦诚指出,现阶段基于代理的 AI 功能仍存在局限性且可能出现错误,尚无法稳定控制复杂软件应用。针对研究表明基于代理的 AI 系统可能存在的安全风险,微软明确表示用户测试将是提升功能可靠性的关键环节。

微软Copilot深度集成Windows11 推出语音控制屏幕分析本地自动化功能插图1

与中国初创公司 Manus深度合作实现系统级本地文件访问
微软近期与中国创新企业 Manus 达成战略合作,双方将集成基于 Anthropic 模型开发的代理技术。该技术已嵌入 Windows 资源管理器中,用户只需右键单击本地文件即可快速创建网站。Manus 代理采用 Anthropic 设计的”模型上下文协议”,实现了对系统范围内本地内容的全面访问权限。

Copilot Connectors拓展联网服务与游戏应用场景
Copilot Connectors 功能支持用户从 OneDrive、Outlook、Gmail 或 Google Drive 等关联服务中提取数据。用户可通过”查找我的牙医预约详情”等自然语言指令,快速搜索预约信息、联系人记录或文档,并将搜索结果直接导入 Word、Excel 或 PowerPoint 等应用程序。在游戏领域,” Gaming Copilot”功能现已登陆华硕 Windows 掌机 ROG Xbox Ally 设备,用户只需按下专用按钮即可在不暂停游戏的情况下,获得《我的世界》等游戏的导航指引或游戏机制解释。

功能适配与升级建议
大部分新增功能均可在任何支持 Copilot 的 Windows 11 设备上运行,但微软建议用户配备 Copilot+ 电脑以获得更流畅的处理速度和本地 AI 任务执行能力。其中特定的” Click to Do” Zoom 集成功能,则明确要求使用 Copilot+ 电脑并参与 Windows Insider 计划。

最新快讯

2025年11月28日

17:54
2025年11月28日,CDPR旗下备受瞩目的开放世界角色扮演游戏《巫师3:狂猎》在Steam平台盛大开启限时特惠活动,优惠将持续至12月12日。此次促销力度空前,标准版游戏史无前例地降至14.9元,完全版也大幅优惠至39.8元,而包含三部曲的捆绑包更是仅需33.38元,均刷新了游戏有史以来的最低价记录。对于广大游戏爱好者而言,这无疑是一个不容错过的绝佳机会...
17:54
2025年11月28日,上海英诺维信智能科技有限公司正式宣布成功完成天使轮融资,投资方为业内知名的创业接力基金。作为工业机器人系统集成与具身智能技术领域的先行者,英诺维信始终致力于推动智能制造领域的创新突破,为企业提供高效智能的自动化解决方案。此次融资不仅为公司的长远发展注入强劲动力,更彰显了资本市场对其技术实力和市场前景的高度认可。 本轮融资所获资金将重点...
17:54
2025年11月26日,一项具有里程碑意义的能源技术突破正式宣告全球诞生。北京星川科技携手日本山形大学下一代电池研究室以及BIH公司共同宣布,全球首套专为混合动力汽车(HEV)设计的高功率半固态电池成功实现量产化。这一创新成果标志着汽车能源领域迈入全新发展阶段,为节能减排和绿色出行提供了革命性解决方案。 该半固态电池采用突破性的凝胶状电解液与聚合物膜隔膜技术...
17:54
2025年11月28日,阿里通义实验室重磅推出全新生图模型Z-Image,凭借卓越性能迅速引爆技术圈,首日便强势登顶Hugging Face趋势榜双榜榜首,下载量突破50万大关。这款创新模型以仅6B参数的精巧架构,实现了媲美百亿级大模型的照片级真实感图像生成,充分展现了AI技术的突破性进展。 Z-Image的核心优势在于其强大的多模态处理能力,不仅支持中英文...
17:54
2025年10月,国家电影局正式公布最新一批全国电影剧本备案信息,备受瞩目的虚拟现实影片《天工开物》成功立项,标志着中国电影在科技与人文融合领域迈出创新步伐。该片由著名导演陆川担任编剧,以明代卓越科学家宋应星的人生轨迹为叙事主线,生动再现这位科学巨匠从屡试不第到潜心钻研,最终完成旷世巨著《天工开物》的辉煌历程。影片将深度聚焦宋应星"于功名进取毫不相关"的治学...
17:54
2025年11月28日,中科硅纪正式宣布成功完成Pre-A轮融资,本轮投资由紫金科创、华控基金、泰亚投资以及北京未来科学城基金联合领投。作为国内通用类人灵巧操作机器人技术的领军企业,中科硅纪凭借其前瞻性的研发战略和卓越的技术实力,在机器人领域再获重要里程碑。 中科硅纪始终致力于打造全球领先的仿人灵巧操作机器人,其自主研发的Casia Hand系列仿人灵巧手已...
17:54
2025年11月28日,上海傲意信息科技有限公司正式宣布成功完成总额高达亿元级别的B3轮战略融资。此次融资由A股上市公司雷迪克(股票代码300652)独家领投,这不仅标志着傲意科技在资本市场的又一重大突破,更是其年内斩获的第三轮过亿元融资,彰显了资本市场对其发展潜力的高度认可。 傲意科技自2015年成立以来,始终致力于具身智能与神经接口技术的深度融合创新,通...
17:53
2025年前三季度,亿纬锂能交出了一份亮眼的成绩单,归母净利润高达28.16亿元,虽然同比微跌11.70%,但第三季度表现尤为抢眼,净利润猛增至12.11亿元,同比增长15.13%,环比更是飙升140.16%。同期,公司动力电池出货量强势突破34.59GWh大关,同比增幅高达66.98%,展现出强劲的增长势头。这一亮眼表现主要得益于全球新能源汽车渗透率持续提...
17:53
2025年11月28日,国内精密传动与伺服驱控系统领域的领军企业国华智能正式宣布完成时代伯勒的战略投资。作为一家专注于高端制造技术研发的高新技术企业,国华智能凭借其在人形机器人核心部件领域的深厚积累,已成功打造出一系列兼具高性能与高可靠性的创新产品。这些产品不仅广泛应用于人形机器人制造,还在工业自动化和航空航天等尖端领域展现出卓越的应用价值。 此次战略投资将...
17:53
2025年11月27日,北京夏禾科技股份有限公司正式在北京市证监局完成首次公开发行股票(IPO)辅导备案,标志着其迈入资本市场的重要里程碑。此次辅导工作由知名券商中信证券独家负责,为夏禾科技的未来发展保驾护航。 夏禾科技成立于2017年,是一家专注于OLED新材料研发与量产的高科技企业。公司注册资本高达3.6亿元人民币,坐落于国家级高新技术产业开发区——中关...
16:52
近日,一起发生在马尔代夫的潜水事件引发了全网热议,一名中国女游客在潜水过程中遭遇鲨鱼攻击,其后续一系列令人咋舌的行为更将冒险与安全意识的边界推向了风口浪尖。据详细报道,该女子在生理期未做任何防护措施的情况下执意下水,导致经血在水中扩散开来。护士鲨虽然以性情温顺著称,但对血腥味却极为敏感,这一行为无疑成为了吸引鲨鱼的致命诱因。 更令人震惊的是,为了拍摄刺激的视...
16:52
小鹏汽车于11月28日宣布正式启动小鹏Ultra系列车型的图灵AI芯片硬件升级计划,预约通道于当天下午14点正式开放。此次升级主要面向小鹏P7 Ultra与G7 Ultra两款车型,通过新增座舱有效算力750TOPS,将打造全球领先的AI座舱算力水平,为用户带来前所未有的智能驾驶舱体验。 本次升级的核心亮点在于显著提升了座舱的智能交互能力与多任务处理性能。搭...