在 WWDC 2024 大会上,苹果公司推出了 Apple Intelligence,这是其在生成式 AI 领域的重要举措。Apple Intelligence 被设计为一种高度个性化且隐私保护的智能助手,集成到 iOS、macOS 和 VisionOS 等各操作系统中。
- 深度个性化:Apple Intelligence 了解用户的各种日常习惯、关系和日常通讯内容,以提供高度个性化的服务。例如,它可以根据用户的日程安排和常用联系人提供智能提醒和建议。
- 支持跨应用交互操作:Apple Intelligence可以跨多个APP联动来完成任务,并且可以访问你的所有个人信息甚至是你当前的屏幕信息, 用来提供符合你使用情景的人工智能体验。
- 隐私至上:所有处理大多在本地完成,利用最新的 Apple Silicon,确保用户数据不被收集和泄露。部分复杂请求通过 Private Cloud Compute 处理,保护用户隐私。
- 深度集成:Apple Intelligence 深度集成在 iOS 18、iPadOS 18 和 macOS Sequoia 中,提供从 Siri 的重大升级到写作和通信工具的广泛功能。
Apple Intelligence 的主要功能
1. 智能写作工具
- 增强的语言能力:帮助用户在各种应用中找到合适的文字,简化和优化写作体验。
- 快速总结:能够在几秒钟内总结整个讲座内容,简化长对话。
- 优先通知:减少不必要的干扰,显示最重要的通知。
2. 视觉表达工具
- Image Playground:创建有趣、独特的图像,可以调整风格以匹配消息线程或幻灯片。
- Image Wand:将草图转换为相关图像,辅助笔记应用中的视觉表达。
- Genmoji:根据描述创建个性化的表情符号,甚至可以使用照片库中的人物照片创建相似的 Genmoji。
- 记忆电影:根据描述在 Photos 应用中创建定制的记忆电影,自动选择最佳照片和视频。
3. 全新的 Siri
- 语言理解增强:具备更强的语言理解能力,使与 Siri 的互动更加自然。
- 深度集成:全新设计的 Siri 更加深度地集成到系统体验中,能够跨应用执行任务。
- 个人化助手:利用用户的个人上下文信息,提供更加个性化的帮助,例如查找特定信息或添加新地址。
4.任务自动化
- 跨应用操作:Apple Intelligence 可以在应用间执行任务,例如从照片应用跳转到笔记应用添加条目。用户可以通过语音命令如“展示上周 Jaws 分享的文件”来简化操作。
- 个人上下文理解:系统能理解用户的个人背景信息,例如会议日程、交通状况、邮件和日历事件,提供更有用的智能帮助。
5. 隐私保护
Apple Intelligence 在提供智能功能的同时,注重用户的隐私保护。所有的数据处理都是在设备上完成的,不会上传到云端。用户的数据经过严格加密,确保隐私安全。具体措施包括:
- 本地数据处理:敏感数据如健康信息和个人偏好都在设备上进行处理,不会传输到服务器。
- 透明的数据使用政策:用户可以随时查看和管理Apple Intelligence收集和使用的数据,并选择是否参与数据共享。
- Private Cloud Compute:处理更复杂的请求时,使用私有云计算,同时保护用户隐私。
6. ChatGPT 集成
- 写作和回答问题:Siri 和写作工具中集成了 ChatGPT,可以在需要时提供更多专业知识和帮助。
- 用户控制:用户可以控制何时使用 ChatGPT,并在信息共享前得到通知,确保隐私。
- 无需注册,免费使用,ChatGPT Plus用户可以绑定账号,未来将支持更多模型接入Siri
- OpenAI与苹果宣布了一项合作,将ChatGPT整合到iOS、iPadOS和macOS系统中。
这一整合将使用户能够直接在苹果设备上使用ChatGPT的功能,包括图像和文档理解,无需切换工具。Siri也将能在需要时调用ChatGPT的智能,用户在发送问题、文档或照片前会被询问同意,Siri然后直接呈现答案。
此外,ChatGPT还将整合到苹果系统的写作工具中,帮助用户生成各种写作内容,并提供图像生成功能,以补充写作内容。在隐私保护方面,用户在使用Siri和写作工具访问ChatGPT时,请求不会被OpenAI存储,用户的IP地址也将被隐藏。用户可以选择连接他们的ChatGPT账号,从而应用其数据偏好。
这项由GPT-4o驱动的ChatGPT整合功能将在今年晚些时候推出,用户无需创建账户即可免费访问,ChatGPT订阅用户可以连接他们的账户并直接访问付费功能。
6.图像和文档处理
借助Apple Intelligence,苹果设备能够更好地处理图像和文档。用户可以使用设备内置的工具来进行图像识别、文本提取和自动分类。这些功能包括:
- OCR(光学字符识别):从照片或扫描的文档中提取文本内容,方便用户编辑和搜索。
- 智能分类:根据内容自动分类照片和文档,例如将风景照片、人物照片和文档扫描件分别归类。
- 需描述您要查找的内容,即可在“照片”应用程序中搜索照片和视频。Apple Intelligence甚至可以在视频剪辑中找到适合您搜索描述的特定时刻,并直接带您进入它。
- 使用“照片”应用程序中的“清理”工具删除照片中的干扰。Apple Intelligence可以识别背景对象,因此您可以轻点一下即可删除它们并完善您的照片——同时保持原始图像的真实性。
7.健康与健身
Apple Intelligence 在健康和健身方面的应用也非常广泛,特别是结合Apple Watch和iPhone,提供更全面的健康数据和分析。
- 健康监测:利用传感器和AI技术,监测用户的心率、血氧水平和睡眠质量,提供详细的健康报告和建议。
- 个性化健身计划:根据用户的健康数据和目标,生成个性化的健身计划,并提供实时反馈和调整。
8.设备支持
在官方信息页面上,苹果详细展示了此次 AI 大更新对设备的要求:在手机端,苹果全新 AI 技术将仅支持 iPhone 15 Pro 以及 iPhone 15 Pro Max 两款机型,在 iPad 端则支持 M1 芯片及以上机型,在 Mac 和 iMac 端也仅支持 M1 芯片及以上机型。