我要评论在windows 11 24h2中，微软为我们带来了全新的 copilot 聊天机器人体验。本次更新不仅改变了 copilot 的呈现和使用方式，还调整了功能和与操作系统的集成度。下面，让我们一起来有哪些激动人心的变化。
独立的 copilot 应用
从 windows 11 24h2 开始，copilot 被从操作系统中剥离了出来，成了一款独立应用。而且它并不是传统的 windows 应用，而是通过 microsoft edge 浏览器安装的pwa 网页应用。
集成方式的改变带来了以下几项变化：
- copilot 不再是从右侧滑出的侧边面板，而是可以自由移动位置和调整窗口大小的独立应用。
- 系统托盘中的 copilot 按钮已经消失，并取消了「任务栏」设置页面中的 copilot 相关选项。
- copilot 应用不能再控制 windows 11 的系统设置。
- 不能再使用
windows + c快捷键来直接呼出 copilot 功能。但如果你的电脑搭载了 ai 功能，可以使用专门的「copilot」键。
需要特别注意的是，从 24h2 版本开始，你将无法再通过 copilot 来直接更改系统设置。我个人推测，可能是由于开发难度太大，暂时搁浅，或者微软有更庞大的 ai 开发规划。因为将 copilot 与 windows 11 深度整合涉及太多底层开发，不亚于从头开发一款 ai 操作系统的难度，短时间内不太可能有很大做为。
焕然一新的 copilot 界面设计
copilot 的界面设计明显借鉴了 openai 的 chatgpt 风格。在左侧面板中，可以查看近期对话历史、访问插件和笔记本选项，并对历史对话进行重命名、删除、共享和导出。
windows 11 copilot 应用
在页面顶部，可以轻松切换对话风格，而提示框则占据了屏幕的中心位置。右上角的个人资料菜单方便你随时登录或退出 microsoft 帐户。
想要体验 copilot 应用的全部功能，你需要登录 microsoft 账户或 microsoft entra 工作或学校账户。此外，出于隐私考虑，你可以根据个人需求选择是否开启「个性化」设置：
1、点击你的头像，在弹出菜单中选择「设置」>「聊天」。
在「设置」中选择「聊天」
2、在「个性化」选项中，勾选或取消「启用个性化设置」，然后点击「保存」。
打开或关闭 copilot 个性化设置
- 开启个性化功能后，ai 助手会更懂你的需求。copilot 会根据你的聊天记录，推测你的兴趣爱好，从而提供更贴心的回答。如果你不想让某条对话用于个性化，可以手动从历史聊天列表中将它删除。
- 关闭个性化功能后，copilot 将不再使用你的聊天记录来量身定制回复。
不使用「copilot 应用」也可以随时卸载或者通过重装找回。
gpt-4o：更强大的 ai 引擎
微软计划将 copilot 的语言模型升级为gpt-4o。这个超强的 ai 模型不仅能处理文本，还能理解图像、音频和视频输入，并生成相应的输出。
在最近的 surface 和 windows 发布会上，微软展示了copilot+ pc电脑类型，并演示了基于 gpt-4o 上运行的 copilot。这项功能让 copilot 能够观察你的电脑操作，就像一个真人助手一样提供帮助。
该功能将通过提示框中的「call」按钮直接整合进 copilot 应用，但具体推出时间尚不确定。
windows copilot 运行时：本地 ai 的力量
windows copilot runtime 示意
windows 11 24h2 引入了windows copilot 运行时，这是一套全新的底层 ai 架构，集成了众多组件，包括 ai 框架、工具链、全新的windows copilot 库以及本地 ai 模型，专为应用程序和用户体验提供 ai 功能支持。
如上图所示，windows copilot runtime 运行时主要分为三层：
第一层
第一层提供了 ai 开发的基础设施，如框架和工具：
- ai 框架：包括directml、onnx runtime、pytorch和webnn等。
- 工具链：包括olive、适用于 visual studio code 的 ai 工具包，以及其他面向开发人员的工具。
第二层
第二层是 windows copilot 运行时的核心，包括 windows copilot 库（api）和本地 ai 模型：
- windows copilot 库：提供了一组全新的 api，方便开发人员将 ai 功能集成到应用程序中。
- 本地模型：集成了 40+ 本地 ai 模型，为许多全新的 windows ai 功能提供支持，例如 windows recall、实时字幕、windows studio effects、自动超级分辨率、「画图」应用中的 图像创建器、语音清晰度、以及「照片」应用中的 restyle 图像等多种酷炫功能。
作为全新运行时的一部分，微软还集成了 phi silica 小型语言模型（slm）和其他模型，如 ocr 光学字符识别器、屏幕区域检测器、自然语言解析器、图像编码器、向量嵌入、rag 检索增强生成、文本摘要和用户活动识别等。
第三层
第三层是面向用户的应用层，通过调用底层功能实现各种 ai 体验：
- 在这一层，各种应用程序（包括 windows 原生应用和第三方应用）可以通过调用第二层的 ai 模型和 windows copilot 库提供的 api，来实现各种 ai 功能，为用户提供更智能、更便捷的使用体验。
- 开发者如果要在自己的应用中集成最新的 ai 功能，也需要通过 windows copilot 运行时来实现。
windows copilot 运行时工作得很底层，直接基于npu和 gpu 来处理 ai 任务，并不依赖云端服务，即使在没有网络的情况下也能正常工作。
未来改进：copilot 建议
windows 11 copilot 建议
尽管 copilot 不再像原来那样与 windows 11 深度集成，但它正在以新的方式融入 windows 生态。微软将通过「copilot 建议」功能，让 ai 助手更智能地融入各个应用中：
- 「copilot 建议」会在合适的时机主动提供帮助。比如，在「设置」界面中，它可能会建议你如何解决常见问题或调整特定设置。
- 在「文件资源管理器」中，当你的鼠标悬停在图片上时，新的弹出菜单会提供 ai 编辑图片的选项。
- 「照片」应用也将迎来 ai 加持。「重塑图像」功能将利用 ai 提供智能编辑建议。不仅如此，它还能帮你修复旧照片，甚至为照片集生成精彩的解说。
- 最后，「copilot 建议」还将出现在「通知」中。例如，当你收到一封带附件的邮件时，copilot 会贴心地询问你是否需要创建摘要。
总的来说，windows 11 24h2 版本中的 copilot 更新，不仅让 ai 助手变得更加灵活易用，还为我们带来了更智能、更贴心的 windows 体验。无论是日常工作还是娱乐，copilot 都将成为你的得力助手。让我们一起期待这些激动人心的新功能吧！
发表评论