谷歌推出了 Magic Pointer,这是一款可与实时上下文感知配合使用的智能鼠标指针。该工具由该公司的人工智能研究部门 DeepMind 于 5 月 12 日推出。该功能已在 Google AI Studio 中进行测试,并将集成到计划于 2024 年底推出的新型 AI 笔记本电脑 Googlebook 中。
魔术指针的工作原理
魔术指针操作直观,无需复杂的命令。指针的简单移动就会激活系统,该系统会在完整的上下文中读取屏幕内容,并使用先进的人工智能模型处理信息。与仅限于专用窗口的传统人工智能工具不同,Magic Pointer 直接在用户界面中工作,从而实现更自然、更快速的交互。
同一主题报道: 谷歌为新版 Googlebook 推出人工智能驱动的 Magic Pointer
用户无需编写长而具体的指令。只需选择一系列内容并给出一般指令,以便 AI 了解情况并采取相应的行动。这种交互模型标志着从基于文本提示的传统界面转向更自然和情境化的命令系统。
更多相关报道: 谷歌推出Magic Pointer,用人工智能重塑光标
实用功能展示
魔术指针演示展示了在电子表格、图像和网页浏览中的使用示例。通过将光标定位在电子表格中的两列上并说“合并”,系统立即将它们合并为一列。该功能还适用于其他环境,例如图像编辑和地图定位。 DeepMind发布了主要应用场景:
- 使用简单的命令自动合并电子表格中的列
- 快速选择和编辑图像中的多个元素
- 无需帮助窗口的浏览器集成上下文搜索
- 在网页上选择多个商品时自动进行产品比较
- Gemini 直接通过光标激活来执行特定任务
与 Chrome 和 Gemini 集成
Magic Pointer 将作为 Gemini 的激活器,Gemini 是集成到 Chrome 浏览器中的人工智能。如果用户在网页上选择多个产品并说“比较”,Gemini 将自动比较这些项目,而无需打开其他选项卡。这种集成旨在简化常见工作流程并减少重复性任务所花费的时间。
Chrome浏览器将获得对该功能的原生支持,允许用户通过直接的页面选择来触发Gemini的AI功能。该模型标志着人机交互形式的演变,使体验更加流畅,更少依赖传统界面。
全部报道: 最新新闻 (CN)
可用性和发布
有兴趣测试 Magic Pointer 的用户无需等待 Googlebook 的推出。 Google AI Studio 现已提供测试版,您可以在图像编辑和地图搜索场景中尝试该功能。通过访问试用版,您可以评估系统的准确性并在完全集成到新笔记本电脑之前提供反馈。集成Magic Pointer的Googlebook计划于2024年底推出,代表着谷歌在硬件与原生人工智能领域战略的深化。
