一、Apple Intelligence 是什么
Apple Intelligence 是 iPhone、iPad 和 Mac 的个人智能系统,它利用苹果芯片的强大能力,在 2024 年苹果全球开发者大会(WWDC)中正式推出,并深度整合到 iOS 18、iPadOS 18 和 macOS Sequoia 中。
这个个人智能系统旨在理解和创建语言和图像,以及跨应用采取行动。它从语言、图片、动作和个人语境这四个角度提供 AI 辅助,涵盖了众多实用功能。
例如,情景驱动的通知功能可以识别对用户个人情境重要的通知;写作改进方面,在第三方和原生应用程序中引入系统范围的校对和风格改进,用户几乎可以在任何写作的地方重写、校对和总结文本;文生图功能让用户能够通过文字创建图像或表情包,如使用全新的 Genmoji 制作专属于自己的表情,或通过 Image Wand 将笔记中的草图转化为复杂图像;图片生成功能可根据照片库生成照片,有素描、插画和动画三种风格;跨应用程序任务处理功能可以深入研究用户的应用程序并代表用户执行任务;关注个人背景功能可利用用户的全部活动和屏幕上的内容,比如用户可以询问会议转移是否会导致迟到;私有云计算使用 Apple Silicon 的特殊服务器上的基于云的模型,确保用户数据的私密性和安全性。
在支持设备方面,苹果电脑(Mac)所有配 M 系列 Apple 硅处理器并运行 macOS Sequoia 的电脑均能够运行苹果智能,包括 MacBook Air(M1,2020 年)及更高版本、MacBook Pro(M1,2020 年)及更高版本等;苹果平板电脑(iPad)所有配备 M 系列 Apple Silicon 处理器并运行 iPadOS 18 的平板电脑均能够运行苹果智能,如 iPad Air(M1,第五代)及更高版本、iPad Pro(M1,第五代)及更高版本;苹果手机(iPhone)所有搭载 A17 Pro 或更新版本并运行 iOS 18 的苹果手机均能够运行苹果智能,包括 iPhone 15 Pro 和 iPhone 15 Pro Max。
二、发展阶段
1. “Siri”阶段
2010 年苹果以 2 亿美金收购“Siri”项目,并发展为智能语音助手。Siri 最初以文字聊天服务为主,后与全球最大的语音识别厂商 Nuance 合作实现语音识别功能。2011 年,Siri 搭载于 iOS 5 系统,在 iPhone 4s 上推出,从此成为苹果独家的语音助手。此后,随着新 iPhone 和 iPad 产品的发布,Siri 逐渐在其他苹果设备上搭载和使用。
2. “仿生”阶段
自 2017 年起,苹果仿生芯片在手机处理芯片中增加 AI 运算加速内核,最早诞生于 iPhone X/8/8Plus 的 A11 Bionic 处理器,又称 NPU(嵌入式神经网络处理器)。这块独立内核主要负责语音、图像、视频的识别工作,能依据照片标签自动生成回忆视频、快速提取照片中的图像与文字信息、根据用户的使用习惯优化任务处理速度、实现面部解锁准确性提升等。仿生芯片特殊之处在于计算时不会干扰到 CPU 和 GPU 的正常工作,能在极低的功耗下瞬时为用户完成计算。
3. “空间计算”阶段
库克在 2023 年 WWDC 表示空间计算将数字内容与物理世界融合,苹果从 2017 年的 IOS 11 上首次展示了 AR 概念,并发布了 AR 开发工具 ARkit,配合首发于 iPad Pro 的 LiDAR 激光雷达,让用户能将想法呈现在眼前。随后,苹果陆续推出空间音频、增强现实等功能,最终这些线索被 2024 年发售的 Vision Pro 串联。
4. “iPhone”阶段
2024 年 6 月 11 日,Apple Intelligence 正式推出,9 月 10 日发布的 iPhone 16 搭载该系统,国行版暂不支持,2025 年投放到中国等市场。iPhone 16 搭载的 Apple Intelligence 功能强大,包括深度整合到 iOS 18 系统,从语言、图片、动作和个人语境四个角度提供 AI 辅助,如情景驱动的通知、写作改进、文生图、图片生成、跨应用程序任务处理、关注个人背景和私有云计算等功能。同时,在苹果智能的加持下,Siri 将更加深入地融入到系统体验中,出现时屏幕周围会闪烁发光,用户可以通过文本使用 Siri,实时纠正用户的陈述,并提供与 OS 更紧密集成的新外观。
三、系统功能
1. 情景驱动的通知
Apple Intelligence的情景驱动通知功能能够智能识别重要通知,并将其呈现在锁屏界面、邮件和消息 App 中。与以前 iPhone 界面上常见的通知堆栈不同,它会将整个堆栈汇总为一条通知,也可以把数十条通知内容或者群聊中的长篇对话汇总为易于理解的内容,让用户更快地抓住重点,确定是否需要进一步查看。
2. 写作改进
Apple Intelligence在系统中引入了范围广泛的校对和风格改进功能。在 iOS 18、iPadOS 18 和 macOS Sequoia 内置的全新全系统写作工具的支持下,用户几乎可以在任何写作的地方重写、校对和总结文本,包括邮件、备忘录、Pages 和第三方应用。写作工具不仅能检查拼写和语法错误,还能根据用户需求调整文本风格,如“友好”“专业”或“简洁”等,同时还能生成文本摘要,帮助用户快速梳理内容要点。
3. 文生图
Apple Intelligence提供了强大的文生图功能,用户可以通过文字创建图像或表情包。例如,使用全新的 Genmoji 制作专属于自己的表情,或通过 Image Wand 将笔记中的草图转化为复杂图像。苹果软件工程高级副总裁 Craig Federighi 制作的以庆祝其爱犬 Bailey 的生日的图片,就是利用了 Image Playground 的实际应用示例,这项功能能够根据文本提示生成卡通风格的插图。此外,苹果计划在 iOS 18.2 中推出 Image Playground 图像生成功能和 Genmoji 自定义表情符号生成功能,该版本预计将于 12 月发布。
4. 图片生成
Apple Intelligence 可以根据照片库生成照片,有素描、插画和动画三种风格。在相册 App 中,用户只需输入描述,如“我在 2024 年的猫”或“夏天的奥兰多”,系统便能自动选择相关照片并配乐。同时,用户可以通过 Memory Mixes 功能调整音频的风格。照片应用还拥有更智能的搜索功能,可以理解自然语言,帮助用户快速找到想要的照片。例如,用户可以简单描述想要寻找的照片,比如“穿着绿色的 Eric 在滑轮滑”,从而让 AI 帮助你找到符合要求的图片。
5. 跨应用程序任务处理
Apple Intelligence 可以深入研究应用程序并代表用户执行任务。例如,用户可要求 Apple Intelligence 在特定时间段内提取联系人发送的文件。
6. 关注个人背景
Apple Intelligence 能够利用用户活动和屏幕内容,为用户提供更加个性化的服务。比如,用户可以询问会议转移是否会迟到,它会根据用户的全部活动和屏幕上的内容给出准确的回答。此外,在邮件管理方面,它能够自动突出显示最紧急的邮件,如晚宴邀请或登机牌,使用户能够快速浏览摘要并直接获取详细信息。智能回复功能还能识别邮件问题并提供建议。在笔记和通话应用中,Apple Intelligence 允许用户录制、转录和总结音频,通话录音会自动通知参与者,结束后生成摘要,帮助用户快速回顾关键信息。
7. 私有云计算
Apple Intelligence 将使用 Apple Silicon 的特殊服务器上的基于云的模型,确保用户数据的私密性和安全性。如果请求需要发送到云服务器,苹果表示它只会以“加密”安全的方式发送有限的数据。通过私有云计算,Apple Intelligence 可以灵活扩展其计算能力,并利用更大的、基于服务器的模型来处理更复杂的请求。这些模型运行在由苹果芯片驱动的服务器上,为苹果确保数据永远不会被保留或暴露提供了基础。独立专家可以检查在苹果芯片服务器上运行的代码以验证隐私,私有云计算加密确保 iPhone,iPad 和 Mac 不会与服务器通信,也就是数据永远不会存储在服务器上,除非其软件已被公开记录以供检查。
8. 更智能的 Siri
在 Apple Intelligence 的加持下,Siri 将更加深入地融入到系统体验中,出现时屏幕周围会闪烁发光。用户可以通过文本输入使用 Siri,实时纠正用户的陈述,并提供与 OS 更紧密集成的新外观。Siri 在语音识别、语义理解、意图识别的速度、准确性方面有了明显提升,即使用户说话的时候突然改变问题,或者说得比较模糊,Siri 都能比较准确地理解用户要问什么,然后给出答案。此外,Siri 可以在 App 内、也可以跨 App 执行操作,例如将 Apple News 上的文章发送到短信中的群组帖子。新版 Siri 还能够利用设备上更广泛的信息和数据,用户可以要求它“展示我上周发送给某人的东西”,或者用户只要说“把这个地址添加到联系人”,它就会照做。随着屏幕感知功能上线,Siri 将能实时在应用程序中理解用户行动并与予以反馈。第三方 App 也能利用 Siri 的一些增强功能,App Intents API 允许开发人员让 Siri 在他们的 App 中执行任务。
四、支持设备
Apple Intelligence支持特定型号的 Mac、iPad 和 iPhone。
在 Mac 方面,所有配 M 系列 Apple 硅处理器并运行 macOS Sequoia 的电脑均能够运行苹果智能,包括 MacBook Air(M1,2020 年)及更高版本、MacBook Pro(M1,2020 年)及更高版本等。这意味着用户可以在这些设备上充分体验 Apple Intelligence 带来的强大功能,如写作改进、文生图、图片生成、跨应用程序任务处理等。
对于 iPad,所有配备 M 系列 Apple Silicon 处理器并运行 iPadOS 18 的平板电脑均能够运行苹果智能,如 iPad Air(M1,第五代)及更高版本、iPad Pro(M1,第五代)及更高版本。iPad 用户可以利用 Apple Intelligence 在学习、工作和娱乐中获得更多便利,例如通过文生图功能制作独特的表情包,或者使用图片生成功能根据照片库创作不同风格的照片。
在 iPhone 方面,所有搭载 A17 Pro 或更新版本并运行 iOS 18 的苹果手机均能够运行苹果智能,包括 iPhone 15 Pro 和 iPhone 15 Pro Max。iPhone 用户可以享受情景驱动的通知功能,让重要通知一目了然;借助写作改进功能在各种应用中轻松重写、校对和总结文本;还能通过增强版的 Siri 获得更智能的服务体验。
此外,像 iPad mini 7 这样的设备,搭载 A17 Pro SoC,运行 iPadOS 18 的同时支持 Apple Intelligence 功能,用户在日常使用时可通过 AI 助手改变文章语法、进行 AI 绘图,并使用增强版 Siri 功能。新款 iMac 搭载最新、最强 M4 芯片和人工智能(Apple Intelligence)功能,标志着苹果设备进入“新时代”。基础款 M4 iMac 配备 8 核 CPU 和 8 核 GPU,售价 1499 美元的版本则升级至 10 核 CPU 和 10 核 GPU,为用户提供更强大的性能和更丰富的 AI 体验。
五、未来发展趋势
1. 语言支持扩展
根据多个消息来源,苹果公司的人工智能项目 Apple Intelligence 将在 2025 年 4 月大幅扩展语言支持,预计将支持包括中文在内的多种语言。Apple Intelligence 的首批功能将通过免费软件更新的形式,随 iOS 18.1、iPadOS 18.1 和 macOS Sequoia 15.1 提供给全球部分国家和地区的用户。这一举措将深度整合进 iOS 系统,为用户带来卓越的使用体验,包括全系统可调用的 Writing Tools,使 Siri 的交互更自然、对话更流畅,以及更智能的照片 App 等。不过,目前苹果官方更新日志中仅表示支持中文,尚未明确国内 iPhone 用户届时是否可以使用 Apple Intelligence 的各项功能。
2. 服务器芯片升级
苹果计划明年在 Apple Intelligence 服务器中使用 M4 系列芯片,以取代当前的 M2 Ultra 芯片。目前尚不清楚具体将使用 M4 芯片的哪个版本,但有推测认为可能是 Ultra 变体。报道还提到,苹果已经与主要供应商富士康商讨在台湾部署 Apple Intelligence 服务器。关于是否会立即在服务器中用 M4 芯片取代 M2 Ultra 芯片,还是会逐步推进这一过渡,目前仍不清楚。
3. 引发换机热潮
技术创新和市场策略双管齐下,苹果公司推出的 Apple Intelligence 系统无疑是一次革命性的创新,极大地增强了苹果产品生态的连贯性和用户体验。虽然目前 Apple Intelligence 存在一些限制,如仅适用于部分地区和语言,且部分功能仍在测试阶段,但从长远来看,随着功能的不断完善和扩展,有望引发新一轮换机热潮。例如,华泰证券的分析报告指出,这一举措将显著刺激苹果现有用户的升级需求。同时,苹果公司上调了 iPhone 16 系列的年度备货目标至约 9000 万部,显示出对市场需求的坚定信心。然而,也有知名苹果分析师对 AI 推动 iPhone 换机潮的逻辑提出质疑,认为目前 Apple Intelligence 只是测试版,下半年只会在部分地区上线,且仅支援英语,消费者在今年下半年为测试版本的 Apple Intelligence 就购买新款 iPhone 16 的预期或许过于乐观。但也有观点认为,随着未来 AI 功能的不断完善,如明年发布的 iPhone 17 系列可能会带来更加完整的 AI 功能版本,届时有望引发大规模换机潮。
六、应用场景
1. ChatGPT 合作
用户可通过 Siri 直接访问 ChatGPT,并且直接通过 Siri 提问并获取答案,还可以对文档和照片内容提出问题,让 ChatGPT 提供解答或建议。此外,在 iOS 18.2 开发者测试版中,Siri 已开始支持 ChatGPT 集成。用户可在获得许可的情况下,将 PDF、文本文件或图像转发给 ChatGPT 进行处理。
2. AI 驱动的 Siri
在 Apple Intelligence 的支持下,Siri 能理解深层次含义指令,例如理解“用户的女儿是谁”或“用户的工作地址”等问题。用户可以通过 Siri 查找文件和照片,比如查找上周同事发过来文件中的一个标题,也可以让 Siri 找到包含特定人物的照片。Siri 还能自动填写信息,如找到包含个人信息的文件(例如护照照片),并且自动填入到指定文档中。同时,Siri 在语音识别、语义理解、意图识别的速度、准确性方面有了明显提升,即使用户说话的时候突然改变问题,或者说得比较模糊,Siri 都能比较准确地理解用户要问什么,然后给出答案。此外,Siri 可以在 App 内、也可以跨 App 执行操作,例如将 Apple News 上的文章发送到短信中的群组帖子,或者用户只要说“把这个地址添加到联系人”,它就会照做。随着屏幕感知功能上线,Siri 将能实时在应用程序中理解用户行动并与予以反馈。第三方 App 也能利用 Siri 的一些增强功能,App Intents API 允许开发人员让 Siri 在他们的 App 中执行任务。
3. Writing Tools
Writing Tools 可以在任何文字输入中帮助用户 AI 编辑,检查,以及总结文字信息。用户可以在写邮件的时候让 AI 协助检查拼写错误,也可以自动更改文字的语气,如调整为“友好”“专业”或“简洁”等风格。在 iOS 18、iPadOS 18 和 macOS Sequoia 内置的全新全系统写作工具的支持下,用户几乎可以在任何写作的地方重写、校对和总结文本,包括邮件、备忘录、Pages 和第三方应用。写作工具不仅能检查拼写和语法错误,还能根据用户需求调整文本风格,如“友好”“专业”或“简洁”等,同时还能生成文本摘要,帮助用户快速梳理内容要点。
4. Image Playground
Image Playground 是一个 AI 图片生成器,用户可以输入指令并从动画、插画、以及手绘三种风格中选择,生成结果可以在任何 app 中直接使用。预览图像将在设备上创建,并且生成的图像可以在信息、备忘录、无边记甚至专用的“Image Playground”应用中访问。Image Playground 应用将为生成的图像“标记元数据”,这样所有人都知道该图像是由 Apple Intelligence 创建的,而不是其他。苹果计划在 iOS 18.2 中推出 Image Playground 图像生成功能,该功能内置在信息等多款 App 中,用户可以将自制图像分享给朋友,还会看到基于当前对话生成的个性化创意推荐。
5. Genmoji
Genmoji 可以 AI 生成 emoji,用户可以选择朋友的图片,Genmoji 会输出一个栩栩如生的定制 emoji。用户只需输入描述文本,便可生成相应的 Genmoji,连同若干附加选项,还可直接使用亲朋好友的照片生成 Genmoji,同表情符号一样,Genmoji 可直接用在任意消息文本内,也可作为贴纸或回复使用点回功能发送。苹果计划在 iOS 18.2 中推出 Genmoji 自定义表情符号生成功能。
6. Image Wand
用户可以使用 Image Wand 把课上画的草图秒变一幅高清图片。
7. AI 总结通话记录
Apple Intelligence 可以支持将通话内容转录成文本,生成摘要,并在各个应用和邮件中分享。通话期间开启录制功能时,通话双方均会自动收到提示。通话结束后,Apple Intelligence 会生成一份内容摘要,帮助用户回顾通话要点。
七、体验方法
1. 软硬件限制
要体验 Apple Intelligence,设备方面有特定要求。手机需为 iPhone 16、iPhone 16 Plus、iPhone 16 Pro、iPhone 16 Pro Max、iPhone 15 Pro 或 iPhone 15 Pro Max;平板电脑需为任何搭载 A17 Pro 或 M1 芯片的 iPad 及更新机型;电脑需为搭载 M1 芯片的 Mac 或更新机型。同时,软件系统需更新至 iOS 18.1 及更高版本,且手机储存空间至少 4GB,以确保 AI 功能的顺利运行,随着未来更多功能的推出,储存空间要求可能会进一步提升。
2. 切换语系
目前,Apple Intelligence 仅支持英文(美国)。用户如果想要体验这一功能,需要将设备的 Siri 语言和设备语言设置为英文(美国)。12 月,Apple Intelligence 将增加对英语(澳大利亚)、英语(加拿大)、英语(爱尔兰)、英语(新西兰)、英语(南非)和英语(英国)的支持。在未来一年里,Apple Intelligence 将扩展到更多语言,例如中文、英语(印度)、英语(新加坡)、法语、德语、意大利语、日语、韩语、葡萄牙语、西班牙语、越南语等。
3. 加入等候名单
开启 Apple Intelligence 功能后需加入等候名单。用户可以前往“设置”,轻点或点按“Apple 智能与 Siri”,然后轻点或点按“加入 Apple 智能等候名单”。Apple 智能通常在用户加入等候名单后的几个小时内可以激活,但具体的等待时间可能会有所不同。当功能可供设备使用时,用户将会收到通知,便可在设备上激活。激活后,系统将开始下载设备端 Apple Intelligence 模型。
八、市场反应
苹果在 2024 年全球开发者大会上推出的 Apple Intelligence 引发了广泛关注。然而,发布会后苹果市值单日蒸发 580 亿美元,这一现象引发了人们对其市场反应的思考。
一方面,苹果的新系统引发了隐私保护争议。此前,苹果在 iOS 15 审查 iCloud 照片以保护儿童的举措就曾引发隐私保护争议。苹果的 neuralMatch 工具在图片上传到 iCloud 之前扫描它们,并与已知的儿童虐待图片数据库进行比对,若发现高度匹配的图片,苹果员工将手动查看报告的图像,若证实用户存在虐待儿童行为,用户的账户将被禁用,并向美国国家失踪和受虐儿童中心报告情况。此举虽得到了儿童保护组织的赞扬,但也引发了不利于隐私保护的争议,有研究人员担心这种扫描工具可能会带来新的危险,如被用来诬蔑无辜的人。此外,有研究指出,苹果默认应用程序即使在显示为禁用状态时也会收集用户数据,这表明苹果用户无法完全控制他们的隐私,苹果的隐私保护措施受到质疑。
另一方面,Apple Intelligence 也有亮点。其符合直觉的应用和隐私保护方案为用户带来了更好的体验。例如,iOS 系统在隐私保护方面一直走在前列,从 iOS6 禁止获取 IMEI,启用广告标识符 IMEI,到 iOS10 加入“限制广告追踪”的选项,再到 iOS14 的模糊定位、取消 App 跟踪和“摄录指示器”功能,以及 iOS15 的新增 APP 隐私权报告和 iCloud+,iOS16 的新增隐私安全检查功能、相册现支持隐藏和加密等,苹果不断完善其隐私保护措施,将选择权完全交给用户。
在消费电子产品中的大模型应用方面,Apple Intelligence 作为苹果首个生成式 AI 大模型,虽然只能用于 iPhone 15Pro 或更高版本机型,但有望带动 2025 年果链换机周期。例如,研报新知指出,苹果 AI 大模型驱动换机周期,立讯精密作为 iPhone 组装份额为 20%的消费电子龙头有望归来。同时,苹果 AI 大模型的发布也让蓝思科技等产业链核心标的价值凸显。此外,苹果也发布了自己的大模型 MM1 多态大语言模型,这一举措标志着苹果在大模型赛道的竞争中迈出了重要一步,也将推动消费电子领域的创新发展。
然而,大模型在消费电子产品中的应用仍在探索中。目前,Apple Intelligence 存在一些限制,如仅适用于部分地区和语言,且部分功能仍在测试阶段。例如,目前 Apple Intelligence 仅支持英文(美国),用户若想体验这一功能,需将设备的 Siri 语言和设备语言设置为英文(美国)。虽然苹果计划在未来一年里扩展到更多语言,但从目前来看,大模型在消费电子产品中的应用还有很长的路要走。
RA/SD 衍生者AI训练营。发布者:風之旋律,转载请注明出处:https://www.shxcj.com/archives/7650