📢 转载信息
原文作者：Andrew Cunningham
AI浪潮席卷Windows：微软雄心勃勃的“AI PC”新篇章
如同过去三年中几乎所有重大的Windows公告一样，微软今天为操作系统宣布的一系列新功能，都围绕着生成式AI（Generative AI）展开。特别是，这些功能聚焦于公司近期热衷的“智能体式AI”（Agentic AI）——这个行业术语指的是“指示AI驱动的软件执行某项任务，然后它在后台自主完成，而用户可以继续处理其他事务”。
然而，无论是从阅读官方公告，还是从本月早些时候参加的新闻发布会来看，我得到的主要印象是：微软正试图利用大型语言模型和其他生成式AI技术，再次尝试复兴其在2010年代语音助手大战中失败并最终停用的产品——Cortana。
根据微软首席消费者营销官Yusuf Mehdi的说法，“AI PC”应该能够“自然地”识别文本或语音输入，能够根据用户屏幕上显示的任何内容提供指导，并且AI助手“应该能够代表用户采取行动”。
告别鼠标键盘：Copilot语音唤醒正式登陆Windows 11
今天最重要的宣布是为Windows 11 PC引入了新的“Hey, Copilot”激活短语。一旦启用，用户只需通过语音即可召唤聊天机器人，而无需鼠标或键盘操作（如果你确实想用键盘，Copilot键或原来的Windows + C快捷键也能唤醒Copilot）。完成工作后，说“goodbye”即可关闭Copilot。
Mac和大多数智能手机已具备类似功能一段时间了，但微软显然希望Copilot能够取代Cortana，从而迎来成功，而非重蹈覆辙。
超越有限指令：Copilot Vision提供更深度的屏幕交互
初代Cortana——以及Siri、Alexa等同类产品——存在的关键限制是它们只能执行相对有限且预先设定的操作列表。复杂的查询或助手无法理解的内容，通常会被转接到一般的网络搜索。搜索结果可能实现用户目标，但也意味着用户需要自己去寻找和遵循指示，责任最终回到了用户身上。
为了让Copilot更有用，微软还宣布Copilot Vision正在全球范围内推广（自6月中旬以来，它已在美国可用）。Copilot Vision可以读取屏幕或应用窗口的内容，并尝试提供有用的指导或反馈，例如，引导用户完成Excel中一个晦涩的任务，或者根据一组照片或项目列表提出建议。（微软还宣布了“Gaming Copilot”的Beta版，它是Copilot Vision的一个分支，专门用于提供正在玩的游戏的 walkthroughs 和建议。）
深度融合核心系统：AI开始干预文件管理与设置
除了对现有功能的调整或更广泛的推广之外，微软还在测试一些新的AI和Copilot相关增量功能，旨在通过读取和编辑文件，从根本上改变用户与Windows PC的交互方式。
微软今天宣布的所有功能都面向所有Windows 11 PC，而非仅限于满足更严格硬件要求的Copilot+ PC。这使得它们比像Recall或Click to Do这样的功能拥有更广泛的潜在用户群，因此了解这些功能的作用以及它们如何保障安全和隐私变得尤为重要。
无论是Copilot应用、添加到Notepad和Paint等应用的生成式AI功能，还是会抓取数据的Windows Recall功能，过去几年Windows中的大部分AI新增功能都是特定于应用的，或者以某种方式与任务栏和文件资源管理器等核心Windows功能隔离开来。
但是，AI功能正越来越多地渗透到任务栏和开始菜单等基础Windows功能中，并被赋予分析或编辑文件，甚至执行文件管理任务的能力。
例如，作为Windows 10和Windows 11过去十年中标准组件的“搜索”字段，正在被改造为一个“Ask Copilot”字段；此功能仍能像当前版本的搜索框一样浏览本地文件，但微软也将其设想为Copilot的键盘驱动界面，适用于无法或不愿使用语音的场景。（我们尚不清楚“旧的”搜索功能是否会保留在开始菜单中，或者作为禁用Copilot的用户可选的后备方案，至少目前还没有明确信息。）
一个名为“Copilot Actions”的功能将扩展Copilot与PC本地文件交互的方式。微软引用了“整理近期度假照片”和从PDF及其他文档中提取信息作为两个潜在用例，并且这个早期预览版本将侧重于“一小部分用例”。但其目标是成为一个“通用智能体”，能够“与桌面和Web应用程序交互”。这为它提供了极大的自由度，以增强或替代某些交互中的基本键盘和鼠标输入。
最后，微软正在再次尝试让Copilot能够更改PC的设置，这是早期版本曾具备但后续迭代中被移除的功能。Copilot将尝试以自然语言回答有关PC设置的问题，并提供指向Windows庞大、复杂的“设置”应用中相应部分的链接。
这些新功能与微软在过去几周或几个月里一直在测试的其他功能相辅相成。本月早些时候向Windows Insiders推出的“Copilot Connectors”（连接器）可以将Copilot的访问权限扩展到Gmail和Dropbox等电子邮件和文件共享服务。新的文档创建功能允许Copilot将Copilot聊天的内容导出为Word或PDF文档、Excel电子表格或PowerPoint演示文稿，以便进一步完善和编辑。文件资源管理器中的AI操作（AI actions in the File Explorer）出现在Windows的右键菜单中，允许直接操作文件，包括批量编辑图片和总结文档。结合Copilot Vision功能（使Copilot能够查看Office文档的全部内容而非仅屏幕显示部分），所有这些功能都将AI注入到更基础的日常任务中，而不是将它们局限在单个应用中。
照例，我们不知道这些新功能何时会向普通大众推出，有些甚至可能永远不会在Windows Insider项目之外提供。至少目前，它们没有被集成到公司正通过其Release Preview渠道分发的Windows 11 25H2更新中。
吸取Recall的教训
微软至少似乎从去年Windows Recall功能失败的推出中吸取了教训。
如果你不了解背景：微软最初的计划是将Recall功能与第一波Copilot+ PC一同推出，但没有先通过Windows Insider Preview项目进行推送。该项目通常会给高级用户、开发者、安全研究人员等提供机会，在功能正式发布前进行试用，从而在向所有Windows PC推出之前向微软提供关于错误、安全漏洞或其他缺陷的反馈。
然而，设法接触到早期、接近发布的Recall版本的安全研究人员发现了一个“设计存在严重缺陷”的功能，它保留了过多的个人信息，并且极易被利用——任何可以访问该PC的人（无论是在本地还是远程），几乎都可以获取到一个包含用户所有PC使用记录的OCR文本的纯文本文件。而且，该功能在支持的PC上默认启用，迫使用户必须手动选择退出，如果不希望使用它的话。
最终，微软撤回了该版本的Recall，花了将近一年的时间来“彻底改造其安全架构”，并花了数月时间让该功能通过Windows Insider Preview渠道，最后才向Copilot+ PC推出。最终的产品仍然对用户隐私构成某些风险，任何承诺截图并存储用户PC上数月使用历史的功能都如此，但它经过了大量改进，最明显的安全漏洞已得到修复，并且默认是关闭的。
至少目前，Copilot Actions也是默认关闭的。微软Windows安全部门企业副总裁Dana Huang发布了一篇冗长的伴随文章，解释了微软在用户使用Copilot Actions时为保护用户隐私和安全所采取的几项措施。这些措施包括：使用专用的用户帐户运行AI智能体，以减少它们对用户文件夹中数据的访问权限；强制代码签名；以及给予智能体完成其工作所需的最小权限。此外，所有智能体的活动都将被记录，因此用户可以验证已采取的操作并纠正任何错误。
这些安全和隐私承诺是否足够，仍是一个悬而未决的问题，但与Recall的初始版本不同，所有这些新功能都将首先通过Windows Insider渠道进行推送测试。如果存在严重缺陷，它们会尽早公之于众，而不是在用户不知情的情况下被推送。
🚀 想要体验更好更全面的AI调用？
欢迎使用青云聚合API，约为官网价格的十分之一，支持300+全球最新模型，以及全球各种生图生视频模型，无需翻墙高速稳定，文档丰富，小白也可以简单操作。
评论区