来瞧瞧微软的AI！

在国庆期间，微软发布了他们一系列的 AI 能力，他们左手跟 OpenAI 紧密合作，右手积极推进在端侧部署自研的小模型，初步判断微软在这波 AI 浪潮中不会掉队。

我们展开看下具体内容。

Copilit

在向所有用户发布我们最先进的工具之前，我们正在对一小部分用户进行试用，以收集反馈、学习，然后将这些经验教训应用回产品中——我们希望它们立即变得更好、更安全。可供 Copilot Pro 用户使用，将其视为让您一睹即将到来的“正在进行的”项目。

备受争议的前 Google DeepMinder 和 Microsoft AI 现任执行副总裁兼首席执行官 Mustafa Suleyman 在 X 上发帖说：“我真的相信我们可以提供更平静、更有用和支持性的技术时代，Copilot 现在更直观、更个性化和安全。了解更多信息、下载并享受。在 Microsoft AI，我们正在为每个人创建一个 AI 伴侣。 这是第一步。"

新引入的功能包括：

1. Copilot Voice

允许用户通过自然语音与 AI 交流，提供四种不同的语音选项。对于语音模式，底层技术是 OpenAI 模型的微调版本：“Copilot Voice 建立在 OpenAI 的最新模型之上，但由 Microsoft 进行了微调。


由于这种微调，Copilot Voice 的响应方式不同。它有 4 个独特的声音，其他声音即将推出。Copilot Voice 将适用于 Pro 和免费用户，Pro 帐户的时间限制更长。

2. Copilot Daily

为用户提供易于理解的一天概览的功能，包括根据他们的兴趣量身定制的新闻和天气摘要。信息来自授权内容提供商，包括路透社和金融时报等，提供精心策划的简化一天的开始。

3. Copilot Vision

可供部分 Copilot Pro 用户使用的实验性功能，它带来了视觉理解功能。用户可以与图像或网页进行交互，Copilot 将解释屏幕上的内容以帮助做出决策**，例如比较产品选项或建议后续步骤。**
Microsoft 强调，这些会话中的任何数据都不会存储或用于培训，强调隐私和安全。

还可以通过 Copilot Labs 获得 Think Deeper，该功能旨在处理更复杂的问题，为具有挑战性的查询提供详细的分步答案。目标是对生活决策、财务比较或实际困境（如决定新车或居住地）等主题提供更深入的见解。

这似乎让人想起 OpenAI 的新 o1 模型，这些模型也旨在在响应之前进行推理和执行“思维链”。

Copilot 还集成了视觉搜索等创意工具，使用户能够上传图像供 AI 分析，无论是识别狗的品种还是根据菜肴的照片提供食谱创意。

样例：

根据用户要求进行主动推荐：

个人观点：

基本上可以认为，微软躺在 OpenAI-O1 模型上进行了微调，基于操作系统的出厂优势高度定制了一些原生体验的 AI 能力，对用户是个好事，体验会更丝滑一些。

后续一些基础 AI 能力和功能大概率会走这种出厂模式，这类产品如果想基于同一套底层模型 API 盈利，恐怕不容乐观。

微软版的 AI PC 搜索

通过新的更新，Windows 11 继续发展成为更加 AI 驱动的操作系统，特别是对于使用 Copilot+ PC 的用户。这些支持 AI 的功能旨在提高生产力，同时保持简化、易于使用的界面。

1. Recall

允许用户立即检索其 PC 上以前查看过的内容。此功能是可选的，并由 Windows Hello 保护，确保用户隐私得到保护。敏感信息（例如信用卡详细信息）通过额外的安全过滤器进行保密。

2. Click to Do

通过在屏幕上叠加交互式建议来帮助用户快速执行操作。
无论是重写文本、编辑图像还是启动网络搜索，此工具都旨在加快工作流程，而无需手动导航。

只需单击一下即可访问，Click to Do 将使 Copilot+ PC 上的多任务处理更加直观。

3. Windows 11 中改进的搜索

**利用 AI 提供更直观的文件搜索。**用户现在可以用自然语言描述他们正在寻找的内容，例如 “BBQ 派对照片”，而无需记住特定的文件名或位置。此功能扩展到 OneDrive 搜索，提供了一种轻松查找照片和文档的强大方法。

据 Microsoft 发言人称，为改进搜索提供支持的 AI 模型显然都是内部模型：

“改进的 Windows 搜索模型已下载到您的 Copilot+ PC 上，并利用 NPU 为改进的 Windows 搜索体验提供支持设置、文件资源管理器和 Windows 搜索框。“

这些增强功能还扩展到创意应用程序。照片中的超分辨率允许用户放大低分辨率图像，而 Paint 中的生成式填充和擦除功能则提供编辑照片的精度，例如删除不需要的对象。这些功能利用板载 AI 提供快速、高质量的结果。

个人观点：

上面这几个功能才是微软整合 AI 能力的体现，同时也提到他们在 PC 端部署了端到端的 AI 小模型，这一点真的不错。回想一下，我们过去 20 年使用 PC 或者笔记本的方式，除了常用软件外，会花不少精力用于文件的管理，查找，建立文档间的联系。虽然 Mac 有一键查找的能力，但是也仅仅是有限的搜索，这需要提前把电脑上所有文件进行索引。

现在，也只有像手机，PC，平板，笔记本上掌握操作系统的厂商才有能力进行深度的 AI 端到端形态整合。微软无疑是体量最大的。

个人非常期待微软的 AI PC 的搜索。那么，压力来到了苹果这边。传统终端尤其是 PC 和手机的能力边界因为有了 AI 加持会变的非常有趣和吸引人，也许在 2024 年末会开启新一轮的商战，究竟鹿死谁手？

说到手机，有个更有趣的要讲，到时候可能要考虑一个问题(未来半年到一年)：消费者会为三折屏还是为 AI 加持的手机买单？

Bing 获得 AI 驱动的搜索摘要和深度搜索

Microsoft 的 AI 驱动的 Bing 随着 Bing 生成搜索的推出而不断发展。此功能超越了简单的基于关键字的查询，为更复杂的问题提供详细、上下文丰富的答案。

1.Bing Generative Search

在美国推出测试版，允许用户通过在搜索栏中输入“Bing Generative search”并从显示为图像“卡片”的演示查询轮播中进行选择来试用其功能，并在其上添加标题。

与提供结果列表的传统搜索引擎不同，Bing 生成式搜索旨在通过综合来自多个来源的信息并以有凝聚力、易于理解的格式呈现来创造无缝体验。

这对于类似 “how to effective run a one-on-one meeting”

或 “how to remove background noise from a podcast” 等查询特别有用。

Bing 将从多个来源生成自己的信息摘要——类似于 Google 有争议的“AI Overviews”功能。

但是，Microsoft 的交互性更强，包含带有源链接和文本的弹出窗口，以及交互式目录，用户可以单击该目录以快速查看摘要的不同部分。

一个有趣的新功能是 Deep Search 按钮，用户可以单击该按钮以获得对主题的更深入、更全面的解释。

此体验旨在处理信息和复杂查询，例如解决详细问题或探索不熟悉的主题。该平台的目标是通过维护平衡的 Web 生态系统来增加内容创建者和发布者的流量。Microsoft 警告说，它仍处于测试阶段。

Microsoft 的公司副总裁兼搜索主管 Jordi Ribas 说，**Bing 依赖于“LLM 和 SLM 的组合”或小语言模型（大概率是指微软的 Phi 系列）“**包括高级 GPT 模型”（我认为这是 OpenAI 的 GPT-4o 系列，于 5 月推出，此后多次更新）。

个人观点：

24 年新出来了很多很多优秀的 AI 搜索引擎，目前一双手都数不过来，作为传统巨头的谷歌和微软都在布局和发力，搜索历来是互联网流量入口，这块的争夺才刚刚开始。

反观像苹果，百度似乎忘记了这件事。

AI PC 的隐患

由于在端侧部署 AI 模型，同时会结合云端大模型 API，自然会涉及到数据的收集。不过微软说用户可以控制他们的数据，并选择退出某些数据收集和 AI 训练功能。特别是在欧洲经济区 （EEA） 和英国等地区，Microsoft 完全遵守当地的隐私法。

对隐私和安全的强调是在 Microsoft 在 2024 年 5 月宣布其适用于 Copilot+ PC 的 Windows 11 Recall 功能时面临用户的强烈反对之后，该功能会拍摄存储在用户设备上的一系列屏幕截图，旨在允许 PC 在用户询问时返回之前的状态。

然而，安全研究人员和工程师指出，该功能的行为很像间谍软件，特别是因为 Microsoft 最初将其作为默认安装和打开的常用功能首次亮相，用户必须跳过多个环节才能禁用。

个人观点：

国内 AI PC 可以不用太担心用户隐私问题，哈哈哈，这也算是特殊的优势吧 😆，或许这对 PC 这块一个不错的机会，我们也许在不久的将来会看到国内很多野蛮生长的 AI PC。

内容参考：https://venturebeat.com/ai/microsoft-leans-harder-into-ai-updating-copilot-bing-and-windows/