Apple Intelligence 十大问答 | Apple 将 AI PC推波助澜

高性能服务器

已于 2024-06-13 10:16:01 修改

阅读量1k

点赞数 28

文章标签：人工智能 apple vision pro

于 2024-06-13 10:14:45 首次发布

本文链接：https://blog.csdn.net/lanhygpu/article/details/139646603

版权

在2024 WWDC Apple开发者大会期间，Apple向期待的观众倾注了一大桶人工智能，让我们在Apple智能的旗帜下浸泡在新的人工智能功能中。但是所有这些功能是如何工作的呢？

Question：什么是Apple Intelligence？

Answer：

Apple刚刚举行了其最具开创性的全球开发者大会（WWDC）主题演讲之一，宣布今年晚些时候其iPhone、iPad和Mac操作系统将推出主要人工智能（AI）功能。

预计Apple将专注于将人工智能纳入其应用程序中，以简化用户的日常任务，Apple称之为 “Apple Intelligence”。

Apple Intelligence具有广泛应用的人工智能功能，而不是高级图像和视频生成。为此，该公司开发了内部人工智能模型，并与OpenAI合作，为将ChatGPT集成到iOS、iPadOS和MacOS的聊天机器人上提供动力。

Question：Apple Intelligence是做什么的？

Answer :

Apple Intelligence主要的功能包括：

- 使用照片中的人工智能改进了照片编辑，如对象删除。
- Siri更好地控制应用程序和操作，包括要求Siri查找电子邮件或编辑照片。
- 基于文本提示的自定义表情符号的人工智能生成。
- 生成笔记、短信、电子邮件和其他文本的快速摘要。
- 自动建议电子邮件和消息的回复。
- 改进的邮件应用程序，可以对电子邮件进行分类并生成消息。
- 语音备忘录的自动转录。
-Xcode自动完成代码的人工智能增强功能。

除了这些人工智能功能外，iOS 18还将包括控制中心、设置和消息的新可定制图标和界面更新。Apple还推出了一个新的密码应用程序，以取代iCloud钥匙串，并为用户提供更友好的选项，类似于1Password和LastPass。

Question：Siri正在进行升级改造吗？

Answer:

Siri正在从里到外升级。虚拟助理为用户提供了新的外观和新的功能列表。Siri logo 经过重新设计，用户与Siri交谈时不会看到Siri气泡，而是包裹在设备边缘的新的发光、彩色的光线将照亮显示屏。

撇开外观不谈，Siri将更自然地理解和响应，使互动感觉更人性化。AI助理还将能够从一个请求到下一个请求保持上下文语义，以准确回答后续问题。

通过iPhone、iPad或Mac上内容和屏幕感知的背景，Siri还可以从在电子邮件、图库中的照片或消息中得到的内容进行推断。Apple分享了一个例子：朋友在短信中共享地址后，Siri能够自动将该地址添加到联系人名片中。

语音助理还将能够跨Apple和第三方应用程序执行数百个新操作，例如从阅读列表中打开文章或在图库中查找特定照片。

Apple还在升级Siri以理解文本，允许用户根据需要输入或与Siri交谈。

Question：Apple 的照片编辑和搜索有什么新功能？

Answer：

Apple正在为其设备提供一个新的AI驱动的照片编辑功能“Clean Up”。该工具可以识别背景中分散的物体且进行删除，重新生成背景。

Apple在其“照片”应用程序中添加自然语言照片和视频搜索。允许用户输入一个提示来搜索图片、视频甚至视频片段。用户可以说：“找到一张我们去年夏天在海滩上发现海星的照片”，iPhone就会按要求调出那张照片，无需滚动浏览数千张照片即可找轻松找到。

用户还可以给出文本提示来创建记忆视频。可以按照描述的视频和照片以及Apple Music的音乐建议而生成。

Question：系统范围的AI文本生成是如何工作的？

Answer：

Apple正在为iPhone、iPad和Mac提供新的系统范围写作工具，这些工具将帮助用户使用AI重写、校对和总结文本。能够快速生成回复或总结一封长电子邮件。

同样还可以帮助用户对文本进行较大编辑，例如更改语气使其更具感同身受，或进行校对以发现错误。

Apple设备还将语音备忘录和电话录音及转录的人工智能升级，用户可以使用AI快速转录语音笔记。

Question：什么是Image Playground？

Answer:

Apple将允许用户在Messages、Photos Notes、Keynote、Freeform、Pages和带有Image Playground的第三方应用程序中使用人工智能生成图像。图像可以使用动画、插图和素描样式生成。

例如，在Notes应用程序中，一个名为Image Wand的新工具将圈出粗略草图，并使用设备上的AI让Image Playground从周边提取想法来生成图像。

Image Playground将于今年秋天推出测试版，一些功能将于明年发布。

Question：ChatGPT会登陆iPhone、iPad和Mac吗？

Answer:

Apple与ChatGPT的OpenAI的新伙伴关系带来了ChatGPT与Siri和系统范围的写作工具集成。

当用户发出语音助理确定ChatGPT会更好地处理的Siri请求时，虚拟助理会询问是否可以与AI聊天机器人共享他们的提示。然后会在同一窗口中显示ChatGPT响应。

Apple表示，其ChatGPT集成具有隐私保护，IP地址模糊，OpenAI没有请求存储。iPhone、iPad和Mac上的ChatGPT将免费使用，前提是设备与最新的操作系统兼容。付费ChatGPT用户将获得额外的Plus功能。

Question：Apple Intelligence是在设备上还是云端处理？？

Answer:

Apple正在研究不同的方法以保持其人工智能严格在设备上运行，从而保护用户的安全和隐私。然而尽管Apple Intelligence正在优先考虑设备上处理以增强隐私，但预计至少要依靠云来完成一些任务。特定任务是在设备上还是在云端处理将取决于任务的复杂性、资源可用性、数据隐私考虑因素和延迟要求。

从本质上讲，如果任务足够简单，可以在本地处理，利用设备的处理能力和电池寿命，需要立即获得结果，则更有可能在设备上处理。涉及敏感数据的任务也可以优云的AI处理需要将数据从设备发送到远程服务器以处理复杂或计算繁重的任务。就App先考虑设备上的处理，因为Apple优先考虑数据隐私。

需要处理大量数据或更新模型的任务可能包括复杂的分析和高级生成式 AI请求。

Apple正在利用它所谓的私有云计算来完成需要云服务器的复杂任务。这些流程利用更大的基于服务器的模型，同时保护用户隐私。服务器建立在Apple Silicon，数据永远不会保存在云端。

根据其复杂性和系统要求，算法将确定需要人工智能的任务是应该在设备上处理还是到云端。

Question：Apple Intelligence安全吗？

Answer:

Apple软件工程高级副总裁Craig Federighi在WWDC 2024主题演讲中表示，Apple Intelligence拥有突破性的隐私保护。Apple强烈强调消费者隐私, Federighi表示其“架构以隐私为核心”。

该公司正在努力通过几种机制保持人工智能功能的安全，包括：

- 设备端处理：本地计算过程确保敏感和私人信息仍由用户控制。任务直接在设备上处理，需要强大的计算能力。这就是为什么Apple要求其AI功能在A17 Pro、M1和更新的处理器上运行。
- “私有云计算”或安全云处理：Apple使用安全、专用的Apple Silicon服务器来处理无法在设备上处理的复杂任务。使用加密验证，只允许其软件公开记录以供检查的服务器与Apple设备通信。
- 有限的数据共享和无保留：Apple确保消费者将数据发送到云服务器时，只发送必要的信息，从而减少曝光。这些数据不会被保留，从而进一步保护消费者隐私。
- 独立代码审查：Private Cloud Compute代码可供独立专家检查和验证其是否符合隐私标准。
- 数据加密：Apple将进出其服务器的所有数据加密。
- 选择退出的能力：用户可以选择是否加入Apple Intelligence。Apple随着时间的推移将努力提高其AI能力。目前这些功能将作为测试版推出。