微软的AI现在可以读取你的屏幕——或者更准确地说，是你正在浏览的网站。
周四，该公司开始推出仅限美国的有限预览版 Copilot Vision。这是一个能够理解并回答你在使用 Microsoft Edge 访问网站时相关问题的工具。该功能位于 Copilot Labs 之后，这是一个用于实验性 AI 功能的自愿加入计划。Copilot Vision 可以分析网页上的文本和图像，以回答诸如“这道千层面的食谱是什么？”之类的问题。
请注意，Copilot Labs 需要订阅微软的 Copilot Pro 计划，每月费用为20美元。
除了回答问题外，Copilot Vision 还可以总结和翻译文本，并处理诸如在商店目录中高亮显示折扣商品等任务。它还可以充当游戏助手，例如在 Chess.com 的比赛期间提供提示。
“当你选择启用 Copilot Vision 时，它会看到你所在的页面，与你一起阅读，你可以共同讨论你面临的问题，”微软在博客文章中写道。“这是一种邀请 AI 伴随你浏览网络的新方式，只要你寻求帮助，它就会整齐地嵌入在你 Edge 浏览器的底部。”
毫无疑问，为了急于避免更多因 AI 隐私失误带来的负面报道，微软强调 Copilot Vision 会在每次会话结束后删除数据。该公司表示，处理的音频、图像或文本不会被存储，也不会用于训练模型——至少在这个预览版中是这样。
Copilot Vision 在可浏览的网站类型上也受到限制。目前，微软禁止该功能处理付费墙内容和“敏感”内容，将 Vision 的使用范围限制在一批预先批准的“热门”网站上。
究竟什么是“敏感”内容？色情？血腥暴力？微软对此不予置评。
一位微软发言人表示：“允许访问的网站列表是根据类别并逐案确定的。我们从一个经过彻底测试的小型网站列表开始，并将随着时间的推移添加更多网站。”
微软这种谨慎的做法部分源于与新闻机构的法律纠纷。在一起正在进行的诉讼中，《纽约时报》指控称，微软通过 Bing 上的 Copilot 聊天机器人提供《纽约时报》的文章，让用户得以绕过其付费墙。
许多大型出版商选择阻止 AI 工具爬取他们的网站，不仅是因为担心数据会被未经许可地使用，还为了防止这些工具导致他们的服务器成本飙升。微软表示，Copilot Vision 将尊重网站的“机器可读的 AI 控制措施”，例如禁止机器人抓取数据用于 AI 训练的规则。然而，该公司尚未明确说明 Vision 将尊重哪些具体控制措施；目前有多种此类措施在使用中。
如果当前趋势持续，Copilot Vision 可能无法在网络上一些顶级新闻网站上正常运行。但微软表示，它致力于“听取反馈”以缓解出版商的担忧。
“我们合作的一些是第三方出版商，他们帮助我们了解 Vision 如何被用于帮助人们在其页面上更好地参与和做出决策，”该公司在博客中写道。“这些输入将帮助我们设计 Vision，使其在与网页交互时更加有用。”