Google giới thiệu Magic Pointer, một con trỏ chuột thông minh hoạt động với khả năng nhận biết ngữ cảnh theo thời gian thực. Tính năng này được tiết lộ vào ngày 12 tháng 5 bởi DeepMind, bộ phận nghiên cứu trí tuệ nhân tạo của công ty. Công cụ này hiện đang được thử nghiệm trong Google AI Studio và sẽ được tích hợp vào máy tính xách tay AI mới, Googlebook, dự kiến ra mắt vào cuối năm 2024.
Magic Pointer hoạt động đơn giản. Một chuyển động nhẹ của con trỏ sẽ kích hoạt hệ thống, hệ thống này sẽ đọc nội dung màn hình trong ngữ cảnh đầy đủ và xử lý thông tin bằng mô hình AI. Không giống như các công cụ AI bị giới hạn trong các cửa sổ chuyên dụng, Magic Pointer hoạt động trực tiếp trong giao diện người dùng. Bạn không cần phải viết những dòng lệnh dài dòng, cụ thể. Bạn chỉ cần chọn một loạt nội dung và đưa ra hướng dẫn chung để AI hiểu được tình huống và thực hiện hành động tương ứng.
Tính năng thực tế được chứng minh
Bản demo Magic Pointer hiển thị các ví dụ về cách sử dụng trong bảng tính. Bằng cách định vị con trỏ trên hai cột và nói “Hợp nhất”, hệ thống sẽ ngay lập tức tích hợp chúng vào một cột duy nhất. Tính năng này cũng hoạt động trong các bối cảnh khác, chẳng hạn như chỉnh sửa hình ảnh và vị trí trên bản đồ. DeepMind đã đưa ra các kịch bản ứng dụng chính:
- Tự động gộp các cột trong bảng tính bằng lệnh đơn giản
- Lựa chọn và chỉnh sửa nhanh nhiều yếu tố trong hình ảnh
- Tìm kiếm theo ngữ cảnh tích hợp trình duyệt mà không cần cửa sổ trợ giúp
- Tự động so sánh sản phẩm khi chọn nhiều mặt hàng trên trang web
- Kích hoạt Gemini trực tiếp bằng con trỏ cho các tác vụ cụ thể
Tích hợp với Chrome và Gemini
Google giải thích rằng Magic Pointer cũng sẽ hoạt động như một công cụ kích hoạt cho Gemini, trí tuệ nhân tạo được tích hợp vào trình duyệt Chrome. Nếu người dùng chọn nhiều sản phẩm trên một trang web và nói “So sánh”, Gemini sẽ tự động so sánh các mặt hàng này mà không cần mở thêm tab. Sự tích hợp này nhằm đơn giản hóa quy trình công việc chung và giảm thời gian dành cho các nhiệm vụ lặp đi lặp lại.
Trình duyệt Chrome sẽ nhận được hỗ trợ riêng cho tính năng này, cho phép người dùng kích hoạt các khả năng AI của Gemini thông qua các lựa chọn trực tiếp trên trang. Mô hình tương tác này đánh dấu sự khởi đầu từ các giao diện thông thường dựa trên các lời nhắc bằng văn bản dài hướng tới một hệ thống các lệnh tự nhiên và phù hợp với ngữ cảnh hơn.
Tính sẵn có hiện tại và tương lai
Người dùng muốn thử nghiệm Magic Pointer không cần phải đợi Googlebook ra mắt. Phiên bản beta hiện đã có trên Google AI Studio, nơi bạn có thể thử tính năng này trong các tình huống chỉnh sửa hình ảnh và tìm kiếm bản đồ. Quyền truy cập vào phiên bản dùng thử cho phép bạn đánh giá độ chính xác của hệ thống và cung cấp phản hồi trước khi tích hợp hoàn toàn vào máy tính xách tay mới.
Việc ra mắt Googlebook với Magic Pointer tích hợp được lên kế hoạch vào cuối năm 2024. Chiếc máy này thể hiện sự đi sâu hơn trong chiến lược của Google về phần cứng với AI gốc, theo xu hướng do các đối thủ cạnh tranh như Apple và Microsoft thiết lập với trợ lý tích hợp của riêng họ. Việc định vị Magic Pointer như một điểm khác biệt cho thấy rằng Google coi tương tác AI không phải là một tiện ích bổ sung riêng biệt mà là một phần trung tâm trong trải nghiệm người dùng của thiết bị.

