首页 / Siri的屏幕意识功能将于明年推出,但你已经可以使用它了。

Siri的屏幕意识功能将于明年推出,但你已经可以使用它了。

2024/12/15 01:15:16
Siri的屏幕意识功能将允许用户通过语音命令从屏幕上提取信息,包括网页、照片和实时摄像头画面。该功能预计在iOS 18.4中推出,但目前支持Apple Intelligence的iPhone已经可以通过Siri从屏幕上提取信息。通过集成ChatGPT,Siri可以更准确地分析和提取屏幕上的信息,包括识别图像和总结文本。
Siri的屏幕意识功能将于明年推出,但你已经可以使用它了。
摘要:Siri可以使用支持的iPhone和ChatGPT从屏幕上提取信息。你可以使用Siri从网页、照片和实时摄像头画面中获取信息。真正的屏幕意识将带来更多的功能和跨应用操作性,但目前的ChatGPT方法仍然非常有用。未找到适合的广告位。屏幕意识即将推出,允许你向Siri询问有关当前显示在iPhone屏幕上的信息。然而,如果你的iPhone支持Apple Intelligence,你已经可以做到这一点了。未找到适用于内容的本地广告!Siri的屏幕意识是什么?当苹果展示iOS 18将要推出的功能时,其中一项升级是Siri增加了屏幕意识。据苹果称,Siri将能够根据当前显示在iPhone屏幕上的信息执行操作。苹果举了一个例子,如果一个朋友发给你一条包含你新地址的消息,你可以对Siri说“将这个地址添加到他的联系人卡片中”,Siri就能从屏幕上提取地址信息并将其添加到相关联系人中。这个过程分为两个部分。一是Siri能够通过从Messages中提取文本并将其传递给Contacts来执行多个应用程序的操作。这目前是不可能的,预计将在iOS 18.4中作为新功能推出。另一部分是Siri能够访问当前屏幕上显示的信息。这项功能预计将在iOS 18.4中推出,但如果你的iPhone支持Apple Intelligence,你已经可以使用Siri从屏幕上提取信息。 如何通过Siri提高屏幕意识要从你的屏幕上获取信息,你需要使用支持Apple Intelligence的iPhone。这是因为Siri不能自己从你的屏幕上提取信息;它需要向ChatGPT求助。随着iOS 18.2的发布,ChatGPT现在已集成到支持Apple Intelligence的iPhone中,目前仅适用于iPhone 15 Pro、iPhone 15 Pro Max和iPhone 16系列。如果你的iPhone受到支持,你只需要在Siri请求中使用一些表明你想从当前屏幕获取信息的词语。例如,你可以这样说“总结当前屏幕上的信息”或“描述我iPhone屏幕上能看到的内容”。如果你发现它无法正常工作,可以在你的查询开头加上“问ChatGPT”可能会有所帮助。Siri可能会询问你是否想将屏幕截图发送给ChatGPT。点击“发送”后,屏幕截图将被ChatGPT分析,并生成对你请求的响应。当屏幕上显示图像时,这个过程就更加令人印象深刻。在这种情况下,你甚至不需要查看屏幕。例如,如果你的iPhone显示了一张动物的图片,你可以简单地问“这是什么动物?”,Siri会问你是否想将截图发送给ChatGPT。ChatGPT 的请求在云端处理,因此如果您的 iPhone 屏幕上显示任何敏感信息,您应该谨慎使用此方法。

从网页向Siri提问

使用这个技巧非常有用,最好的部分是ChatGPT不仅可以从屏幕上可见的网页文本中提取信息,还可以从整个页面提取信息,包括你需要滚动才能看到的文本。如果你需要从网页中获取联系信息,例如,这些信息不需要显示在屏幕上,只要它们在页面的某个地方即可。打开你想要从中提取信息的网页。在这个例子中,我想找到一家餐厅的营业时间。自助餐是24小时营业的,但网页上显示的餐厅营业时间需要滚动才能看到。即使现在iPhone屏幕上没有显示这些时间,Siri也能通过ChatGPT的帮助提取这些信息。按住侧面按钮或说“Siri”或“嘿,Siri”。问类似“获取屏幕上显示的业务的营业时间”。当Siri询问你是否要将截图发送给ChatGPT时,点击“截图”,然后选择“全部内容”。这将包括网页上的所有信息,包括屏幕上不可见的内容。关闭点击“发送”,截图将发送到ChatGPT。几秒钟后,你的回复将出现,Siri会朗读出来。关闭向Siri询问关于一张照片的信息你还可以让Siri使用ChatGPT来分析屏幕上显示的照片。例如,如果你在动物园拍了一张企鹅的照片,你可能想知道它们是什么种类的企鹅。你可以打开照片,然后问Siri,ChatGPT会帮你分析。打开你想要分析的照片。说“这是什么物种?”Siri会询问你是否想将照片发送给ChatGPT。点击“发送”以确认。ChatGPT将分析图像,稍后会给出响应,Siri会朗读出来。如果你使用这种方法,你的照片将被发送到ChatGPT的服务器。如果你不想照片离开你的设备,你应该考虑这一点。让Siri总结文本如果你没有时间阅读一大段文字,可以使用这种方法让Siri帮你总结,借助ChatGPT的帮助。对于网页,你可以选择全部内容,这样可以得到整个网页的摘要,而不仅仅是可见部分,但对文本文件不适用。然而,你可以在Cha