机型测评社
3小时前来自 科技看点

iOS 27 Siri新增的屏幕感知功能如何使用?

一、什么是屏幕感知功能

屏幕感知是 iOS 27 中 Siri AI 的核心能力之一。当 Siri 被激活后,它能够实时分析当前屏幕上显示的图片、文字、网页或应用界面,并以此为基础回答用户的问题或执行任务。例如,你可以对着一条包含地址的信息问“把这个地址存到通讯录”,Siri 会直接完成添加操作。

二、如何启用屏幕感知

屏幕感知功能不需要额外开关,只要你的设备支持 Siri AI(具体机型见下文),且已经升级到 iOS 27 正式版或测试版,即可自动生效。

启用 Siri AI 的方式有三种:

语音唤醒:直接说“Siri”或“嘿 Siri”即可激活新界面。

侧边按钮:长按 iPhone 侧边按钮启动 Siri。

灵动岛下滑:从屏幕顶部的灵动岛区域向下滑动,呼出 Siri 对话窗口。

三、屏幕感知功能的典型使用场景

1. 信息提取与操作

当你正在查看某条信息、邮件或网页时,可以直接对 Siri 发出如下指令:

  • 场景
  • 指令示例
  • 效果
  • 添加联系人“把这个电话号码存到通讯录”Siri 识别屏幕上的电话并创建新联系人
  • 识别地标/植物打开相机对准花草,问“这是什么植物?”相机实时显示植物名称和习性
  • 扫描名片拍照后说“扫描这张名片”自动提取姓名、电话、地址并存入通讯录
  • 食品营养查询扫包装后问“这个的热量是多少?”识别营养成分并同步到健康应用

具体操作过程为:当 Siri 被唤醒时,它会自动分析当前屏幕内容。你只需用自然语言提问,Siri 就会提取关键信息并执行相应动作。

2. 跨应用任务自动化

屏幕感知结合个人情境理解,可以实现复杂的跨应用操作:

从聊天记录中找信息:问“上周朋友推荐的那家日料店在哪?”Siri 会自动翻阅 iMessage 或微信(需授权)中的聊天记录,提取店名和地址并打开地图导航。

将海报信息加入日历:对着演唱会海报说“把这场演出加到日历”,Siri 会识别海报上的日期、时间并自动创建日程。

转发当前照片:在相册中看到一张照片,说“把这张图发给妈妈”,Siri 会调出照片并帮你发送短信或邮件。

3. 相机中的“Siri模式”

iOS 27 的相机应用新增了与“照片”“视频”并列的“Siri”模式。切换到此模式后:

对准物体:Siri 会实时识别并显示相关信息(动物、植物、地标等)。

扫描二维码/条形码:自动识别并跳转至对应页面或添加至钱包应用。

识别文字:对名片、菜单、标牌上的文字进行 OCR 提取,并提供复制、翻译、搜索等操作。

使用方式:在相机界面向左或向右滑动选择“Siri”模式,然后对准目标,屏幕会自动弹出识别结果。

四、使用小贴士

对话式提问:屏幕感知支持多轮对话。你可以在识别结果上继续追问,例如“附近还有哪些类似的餐厅?”Siri 会基于上下文回答。

独立 Siri 应用:iOS 27 新增了独立的 Siri 应用,你可以像使用聊天软件一样输入文字指令,Siri 会显示完整回答和操作记录。在独立应用中也可直接引用当前屏幕内容。

注意设备兼容性:完整的屏幕感知功能(包括自定义语音、高精度听写)需要设备配备 12GB 以上运行内存,目前支持机型包括 iPhone 17 Pro/Pro Max、iPhone Air,以及搭载 M4 芯片且内存≥12GB 的 iPad。基础屏幕感知功能则在 iPhone 15 Pro 及以上机型均可使用。升级前请确认你的设备是否在支持列表中。

五、总结

iOS 27 的屏幕感知功能将 Siri 从一个被动语音助手升级为主动理解屏幕内容、并能跨应用执行任务的智能体。你只需在需要时唤醒 Siri,然后用自然语言说出需求,剩下的提取、识别、操作都由系统自动完成。无论是处理信息、管理日程还是快速获取实物信息,这一功能都让日常操作变得更加高效直接。