果核Pulse
苹果AI移动操作系统

苹果重写Siri:能看懂屏幕,跨应用操作

苹果重写Siri:能看懂屏幕,跨应用操作

Siri 从底层重建

iOS 27 里,Siri 被连根重写了。Apple 这次直接按大模型时代的标准来做,不是换皮。

重写之后,Siri 多了几类能力。广泛的世界知识让它几乎什么问题都能答。个人上下文理解帮它跨应用找东西,信息、邮件、日历、备忘录、提醒事项都在覆盖范围内。它还能看懂屏幕,当前显示的内容可以直接问、直接操作。跨应用操作也有了,发消息、创建日历事件这类事,Siri 能直接办。

这些能力叠在一起,Siri 就不只是问答工具了。它能自己跑完一连串跨应用操作,更像系统级助手。

Apple 还单独做了一个 Siri 应用,对话历史通过 iCloud 同步到所有 Apple 设备。iPhone 上聊到一半,换到 Mac 或 iPad 可以接着聊。

写作也被纳入进来。在任何能打字的地方说需求,Siri 就能从零起草、编辑已有文字,或者给反馈。视觉智能集成进 Siri,功能也升了级。语音方面,兼容硬件上可以自定义语速和表现力。

常用应用集体接入 AI

Siri 之外,Apple 把 AI 铺进了系统里的常用应用。

照片应用新增空间重构图、扩展和增强版清理功能。信息应用有了个性化智能回复,邮件应用同时提供建议和个性化智能回复。日历和提醒事项支持直接用自然语言描述,事件、提醒写一句话就行。

Safari 多了“通知我”、描述扩展和按主题整理标签页。快捷指令可以用自然语言描述创建,文件应用会给文件和文件夹起名建议。Image Playground 重新设计过,加入逼真图像生成和壁纸创建。家庭应用会把相关活动通知合并,HomeKit 安全视频支持 AI 搜索和字幕。日志应用增加了自定义写作提示。

系统级功能与没回答的问题

系统层面也有一批新功能。自动校对会给拼写和语法提修改建议。和商家通话时,Call Context 会在屏幕上显示相关信息。辅助功能也有增强:VoiceOver 能提问,并获取详细的图像和场景描述。Voice Control 支持灵活的项目名称。Accessibility Reader 提供内容清理和摘要。

Apple 没有公布 iOS 27 的具体发布时间,也没给设备支持范围。这些 AI 功能是否支持中文,同样没有说明。Siri 的重建是否依赖云端,用户数据在端侧和服务器之间怎么流转,目前都没有明确信息。Image Playground 的逼真图像生成怎么处理深度伪造风险,也没有答案。

从屏幕感知、跨应用操作到写作辅助和系统校对,这次公布的基本是能力清单,技术细节要等后续更新。Siri 等了很多年的底层重建,和常用应用的同步改造,这次一起出了。实际分量要等正式版推送之后才能衡量。

相关话题 # 苹果# 移动操作系统
原文来源 9to5Mac

📬 订阅 果核Pulse

每日早间更新,不错过重要信号

▲ 回到顶部