Google推出了 Magic Pointer，這是一款可與即時情境感知配合使用的智慧滑鼠指標。該功能由該公司的人工智慧研究部門 DeepMind 於 5 月 12 日揭曉。該工具已在 Google AI Studio 中進行測試，並將整合到計劃於 2024 年底推出的新型 AI 筆記型電腦 Googlebook 中。
魔術指針操作簡單。指針的輕微移動就會啟動系統，該系統會在完整的上下文中讀取螢幕內容並使用人工智慧模型處理資訊。與僅限於專用視窗的 AI 工具不同，Magic Pointer 直接在使用者介面中運作。您不需要編寫長而具體的命令。只需選擇一系列內容並給出一般指令，以便 AI 了解情況並採取相應的行動。
實用功能展示
魔術指針示範展示了電子表格中的使用範例。將遊標放在兩列上並說“合併”，系統立即將它們合併為一列。该功能还适用于其他环境，例如图像编辑和地图定位。 DeepMind發布了主要應用場景：
- 使用簡單的命令自動合併電子表格中的列
- 快速選擇並編輯影像中的多個元素
- 無需幫助視窗的瀏覽器集成上下文搜索
- 在網頁上選擇多個商品時自動進行產品比較
- Gemini 直接透過遊標啟動來執行特定任務
與 Chrome 和 Gemini 集成
谷歌解釋說，Magic Pointer 還將充當 Gemini 的啟動器，Gemini 是整合到 Chrome 瀏覽器中的人工智慧。如果用戶在網頁上選擇多個產品並說“比較”，Gemini 將自動比較這些項目，而無需打開其他選項卡。這種整合旨在簡化常見工作流程並減少重複性任務所花費的時間。
Chrome瀏覽器將獲得對該功能的原生支持，允許使用者透過直接的頁面選擇來觸發Gemini的AI功能。這種交互模型標誌著從基於長文本提示的傳統介面轉向更自然和上下文化命令的系統。
當前和未來的可用性
有興趣測試 Magic Pointer 的用戶無需等待 Googlebook 的推出。 Google AI Studio 現在已提供測試版，您可以在圖像編輯和地圖搜尋場景中嘗試該功能。透過存取試用版，您可以評估系統的準確性並在完全整合到新筆記型電腦之前提供回饋。
整合 Magic Pointer 的 Googlebook 計劃於 2024 年底推出。這台機器代表了 Google 在具有原生 AI 的硬體領域的策略性深化，追隨了蘋果和微軟等競爭對手透過自己的整合助理確立的趨勢。 Magic Pointer 的差異化定位表明，Google並未將人工智慧互動視為單獨的附加元件，而是將其視為設備使用者體驗的核心部分。