AIGCLINK
26-05-13 11:00 微博认证:AI博主

谷歌最新研究:要把鼠标指针AI化,让鼠标指针从单纯的坐标指示升级为能理解意图并跨应用可用的AI入口

当前AI的交互模式必须复制粘贴文本或上传图片等等把上下文搬到AI窗口里,这就会造成工作流中断

比如,你想对一份PDF生成摘要然后粘贴到邮件里,或者把表格统计变成饼图,传统做法得把内容搬进AI窗口,谷歌认为这种绕路是反直觉的

他们的解法是让AI能力嵌入指针本身,用户在任何应用里指向内容就能直接调用AI,无需切换窗口

也就是说传统指针,告诉电脑“手指在这儿”,只传递位置信息

AI指针,告诉电脑“在看这个,想做这件事”,同时传递位置+内容理解+用户意图,让指针从定位工具变成意图表达工具

这个的实现是基于Gemini驱动,模型同时理解屏幕上的视觉内容、指针位置、语音指令,通过指向+语音的极简交互,让AI自动读取上下文并跨应用可用

目前这个概念也正在落地谷歌自家的产品中,Chrome浏览器可以直接用指针选中网页部分内容向Gemini提问

Googlebook笔记本也即将推出Magic Pointer

当前AI要求把详细上下文写进prompt,而AI指针让系统自动读取上下文,用户只需要说“总结这个”即可

这也降低了认知负荷和表达成本,使AI的交互更接近人际交流的自然状态

博客:https://deepmind.google/blog/ai-pointer/?utm_source=x&utm_medium=social&utm_campaign=&utm_content=

#AIenabledpointer##AI鼠标##AI时代人机交互#

发布于 山西