微软希望将生成式人工智能推向 Windows 及其运行设备的前列。
在本周举行的年度 Build 开发者大会的两场主题演讲中，该公司发布了一系列新的 Windows 设备，称之为 Copilot+ PC，并推出了由生成式 AI 驱动的功能，如 Recall（回忆），它可以帮助用户查找过去查看过的应用、文件和其他内容。微软的生成式 AI 品牌 Copilot 将很快更深入地集成到 Windows 11 体验中。此外，新的 Microsoft Surface 设备也即将推出。
我们在此汇总了周一和周二的所有重大公告。
体积应用程序
微软正将Windows Volumetric Apps——即具备空间感知能力的交互式VR应用——引入Meta Quest头显。通过与Meta的合作，微软表示将为Quest头显提供Windows 365和本地PC连接功能，使开发者能够将其应用扩展至三维空间。
在周二的主题演讲中，微软展示了一个 Xbox 控制器的数字爆炸 3D 视图，视角来自 Meta Quest 3 头显——佩戴者可以用手操作这个数字对象。“我们正在深化与 Meta 的合作，使 Windows 成为 Quest 设备上的顶级体验。”微软 Windows 和设备高级副总裁 Pavan Davuluri 在演示期间表示。
开发者可以注册预览版以获取微软新体积API的访问权限。
Copilot+ PCs
Copilot+ PC 是微软以 AI 为首选的旗舰 Windows 硬件愿景。所有设备均配备专用的 NPU（神经网络处理单元）芯片，以支持 Recall 等 AI 体验。它们至少配备 16GB 内存，并搭配 SSD 存储。
首批 Copilot+ PC 将搭载高通的 Snapdragon X Elite 和 Plus 芯片，微软声称其网页浏览电池续航可达 15 小时，视频播放电池续航可达 20 小时。芯片制造商 Intel 和 AMD 也承诺与包括宏碁、华硕、戴尔、惠普、联想和三星在内的多家制造商合作，为 Copilot+ 设备构建处理器。
Copilot+ PC 起售价为 999 美元，部分产品今天即可预购。
Surface Pro 和 Surface Laptop
微软新发布的 Surface 设备——Surface Laptop 和 Surface Pro——专注于性能和电池续航。
最新款的 Surface Laptop（提供 13.8 英寸或 15 英寸显示屏选项）采用了“现代线条”设计，屏幕边框更薄。据公司称，其充电后可使用长达 22 小时，速度比 Surface Laptop 5 快高达 86%。它还支持 Wi-Fi 7，并配备了具有触觉反馈的触控板。
至于新款 Surface Pro，微软表示其速度比上一代 Surface Pro（即 Surface Pro 9）快高达 90%，并配备了新的 HDR OLED 显示屏、Wi-Fi 7（可选 5G）以及升级版的超广角前置摄像头。此外，其可拆卸键盘（已通过额外碳纤维加固）现在也具备触觉反馈功能。
召回
Windows 11 即将推出的 Recall 功能可以“记住”用户在几周甚至几个月前在其 PC 上访问的应用和内容，例如帮助他们找到正在讨论考虑购买衣物的 Discord 聊天。用户可以使用 Recall 的时间线“回滚”查看他们最近在做什么，并在 PowerPoint 演示文稿等文件中深入挖掘，以显示可能与其搜索相关的信息。
微软表示，Recall可以在颜色、图像等之间建立关联，让用户能够用自然语言在电脑上搜索几乎任何内容（这与初创公司Rewind的技术类似）；开发者可以通过向应用中添加上下文信息来增强Recall的功能。此外，微软声称所有与Recall相关的用户数据都保持私密并存储在设备本地——重要的是，这些数据不会用于训练AI模型。
以下是来自微软的更多说明：“您的快照属于您自己；它们保留在您电脑的本地。您可以在设置中删除单个快照、调整或删除时间范围，或者直接从任务栏系统托盘中的图标暂停操作。您还可以过滤掉某些应用和网站，使其永不保存。”
图像编辑和实时翻译
Windows 中的 AI 功能比以往任何时候都多，其中一些功能仅在新的 Copilot+ PC 上提供。
一项名为“超级分辨率”（Super Resolution）的新功能可以通过自动放大来修复旧照片。Copilot 现在可以分析图像，为用户提供创意构图的灵感。通过名为“Cocreator”的功能，用户可以生成图像，并让 AI 模型根据他们的绘画内容来修改或重新设计图像风格。
此外，“实时字幕”（Live Captions）具备实时翻译功能，可将经过 PC 的任何音频——无论是来自 YouTube 还是本地文件——翻译成用户选择的语言。实时翻译最初将支持约 40 种语言，包括英语、西班牙语、普通话和俄语。
Microsoft Edge 中另一项相关的新功能在 LinkedIn、YouTube、Coursera、路透社、CNBC、彭博社等网站上提供实时视频翻译。该功能预计将在不久的将来推出，支持将西班牙语翻译成英语，以及将英语翻译成德语、印地语、意大利语、俄语和西班牙语，并通过配音和字幕实时翻译语音内容。
团队 Copilot 及扩展功能
Team Copilot是微软不断扩大的Copilot生成式AI技术套件的最新扩展。它与公司的视频会议应用Teams集成，帮助管理会议议程并记录笔记，会议中的任何人都可以共同编辑这些笔记。它还扩展到Loop和Planner——微软的协作和规划平台——以创建和分配任务、跟踪截止日期，并在需要团队成员输入时发出通知。
在与Copilot相关的新闻中，微软已启动（处于私有预览阶段）Copilot Extensions，允许开发者通过第三方应用和技能来扩展GitHub的代码生成工具GitHub Copilot。首发合作伙伴包括DataStax、Docker和LambdaTest；这些扩展将托管在GitHub Marketplace中，但开发者也可以创建自己的私有扩展，以便与其内部系统和API集成。
Windows Copilot Runtime
支撑 Recall 和超级分辨率等功能的是 Windows Copilot Runtime，这是一组包含约 40 个生成式 AI 模型的集合，微软将其描述为 Windows 的“新层”。它与语义索引（Semantic Index）协同工作，后者是基于向量的系统，仅存在于单个 Copilot+ PC 上。Windows Copilot Runtime 使得生成式 AI 驱动的应用程序——包括第三方应用——能够在不一定需要互联网连接的情况下运行。
Davuluri 周二表示：“[该运行时] 包含现成的 AI API，如 Studio Effects、实时字幕翻译、OCR、基于用户活动的 Recall 等，这些将于六月向开发者开放。”
微软表示，来自 TikTok 母公司字节跳动的热门视频编辑器 CapCut 将使用 Windows Copilot Runtime 及配套的 Windows Copilot Library（一套 API 和 AI 开发工具），以加速其 AI 功能。Meta 将把上述 Studio Effects 添加到 WhatsApp 中，在视频通话中提供背景模糊和眼神接触等功能。
升级后的机器人构建器
Azure AI Studio是微软Azure OpenAI Service内的工具集，允许客户结合AI模型构建能够“推理”该数据的应用，它将很快允许开发者使用按量付费的推理API创建应用——通过这些API，开发者可以访问并微调托管在Azure基础设施上的生成式AI模型。微软称此为“模型即服务”，初期将推出Nixtla和Core42的模型。
在相邻的 Copilot Studio 产品套件中，微软正在推出 Copilot 智能体，该公司将其描述为能够“独立编排针对特定角色和功能定制的任务”的 AI 机器人。（Copilot Studio 提供了将 Copilot for Microsoft 365——即 Excel 和 Word 等应用中由 AI 驱动的“copilot”——连接到第三方数据的工具。）凭借对上下文记忆和知识的利用，Copilot 智能体可以导航各种类型的业务流程，从用户反馈中学习，并在遇到不知如何处理的情况时寻求帮助。
Snapdragon Dev Kit
高通推出了一款新的开发套件，旨在帮助开发者为搭载 Arm 芯片的 Copilot+ PC 构建应用程序。
售价 899.99 美元的 Snapdragon Dev Kit for Windows——顺便一提，其宽高与苹果 Mac Mini 大致相同——内置高通 Snapdragon X Elite 芯片，搭配 32GB 内存、512GB 存储以及丰富的 I/O 接口。该开发套件支持 Wi-Fi 7 和蓝牙 5.4，并通过其各种 USB-C 和 HDMI 端口，可同时驱动最多三个 4K 显示器。
Phi-3
微软宣布在其生成式 AI 模型家族 Phi 中添加 Phi-3-vision，该模型能够执行一般的视觉分析和推理任务，例如回答有关图表和图像的问题。该模型可以读取文本和图像，并且足够高效，可以在移动设备上运行。
Phi-3-vision 目前处于预览阶段，而此前宣布的纯文本模型——Phi-3-mini、Phi-3-small 和 Phi-3-medium——现已全面开放。
与可汗学院的合作伙伴关系
微软正与可汗学院合作，捐赠云计算基础设施的使用权限，使可汗学院能够为美国的教育工作者免费提供其基于人工智能的工具。微软于周二表示，两家公司还将合作探索利用生成式 AI 改进数学辅导应用的机会。