Google анонсировала Magic Pointer, интеллектуальный указатель мыши, который работает в режиме реального времени с учетом контекста. Инструмент был разработан DeepMind, исследовательским подразделением компании в области искусственного интеллекта, и публично представлен 12 мая. Система уже находится на этапе тестирования в Google AI Studio и будет интегрирована в новый блокнот Googlebook с искусственным интеллектом, запуск которого запланирован на конец 2024 года.
Как работает Волшебный Указатель
Magic Pointer работает просто и интуитивно понятно. Когда пользователь перемещает указатель по экрану, система автоматически активируется и считывает визуальный контент в полном контексте. Модель искусственного интеллекта обрабатывает полученную информацию и выполняет соответствующие действия. В отличие от других инструментов искусственного интеллекта, ограниченных специализированными окнами, Magic Pointer работает непосредственно в пользовательском интерфейсе без необходимости использования длинных и конкретных команд. Пользователь просто выбирает другой контент и дает общие инструкции, чтобы искусственный интеллект понял ситуацию и предпринял соответствующие действия.
Практические возможности продемонстрированы
В тестах Magic Pointer были представлены примеры использования в электронных таблицах. Когда курсор находится над двумя столбцами и пользователь говорит «объединить», система немедленно объединяет их в один столбец. Эта функциональность также работает в других контекстах, таких как редактирование изображений и поиск по карте. DeepMind опубликовала основные сценарии применения ресурса:
- Автоматически объединяйте столбцы в электронных таблицах с помощью простых команд.
- Быстро выбирайте несколько элементов на изображениях для редактирования.
- Поиск в браузерах без использования вспомогательных окон.
- Автоматическое сравнение товаров на веб-страницах при выборе товаров.
- Прямая активация Gemini для конкретных задач с помощью курсора.
Интеграция с Chrome и Gemini
Google объяснил, что Magic Pointer работает как инструмент для Gemini, искусственного интеллекта, интегрированного в браузер Chrome. Когда пользователь выбирает несколько продуктов на странице и говорит «Сравнить», Gemini открывает дополнительную вкладку и автоматически сравнивает товары. Эта интеграция упрощает общие рабочие процессы и сокращает время, затрачиваемое на повторяющиеся задачи. Браузер Chrome получит встроенную поддержку этой функции, что позволит пользователям активировать функции искусственного интеллекта путем прямого выбора на странице.
Диалоговая модель была разработана на основе длинных текстовых подсказок, демонстрируя эволюцию по сравнению с традиционными интерфейсами. Система стремится к большей естественности контекста, отходя от искусственных команд и переходя к более интуитивному взаимодействию. Этот подход отражает цель Google — создать систему команд, которая естественным образом адаптируется к рабочему процессу пользователя.
Текущая доступность и перспективы на будущее
Пользователям, заинтересованным в Magic Pointer, не нужно ждать запуска Googlebook. Бета-версия теперь доступна в Google AI Studio, что позволяет тестировать сценарии редактирования изображений и поиска по картам. При доступе к пробной версии система оценивает точность инструмента и предоставляет отзывы об улучшениях перед полной интеграцией в новый ноутбук. Запуск Googlebook запланирован на конец 2024 года, что консолидирует стратегию Google в области аппаратного обеспечения со встроенным искусственным интеллектом.
Magic Pointer знаменует собой углубление стратегии Google в области аппаратных помощников с искусственным интеллектом. Такие компании, как Apple и Microsoft, уже установили аналогичные тенденции с помощью своих собственных интегрированных помощников. Позиция Google демонстрирует жесткую конкуренцию на рынке ноутбуков с собственным искусственным интеллектом. Отличительная черта Magic Pointer заключается в подходе к централизации взаимодействия с искусственным интеллектом не как отдельного инструмента, а как важного компонента пользовательского опыта на устройстве.