Google a introduit Magic Pointer, un pointeur de souris intelligent qui fonctionne avec une connaissance du contexte en temps réel. La fonctionnalité a été révélée le 12 mai par DeepMind, la division de recherche en intelligence artificielle de la société. L’outil est déjà testé sur le Google AI Studio et sera intégré au nouvel ordinateur portable AI, le Googlebook, dont le lancement est prévu fin 2024.
Magic Pointer fonctionne simplement. A slight movement of the pointer activates the system, which reads the screen content in full context and processes the information using AI models. Diferente des outils d’IA cantonnés à des fenêtres dédiées, Magic Pointer fonctionne directement dans l’interface utilisateur. Você n’a pas besoin d’écrire des commandes longues et spécifiques. Basta sélectionne une gamme de contenus et donne une instruction générale afin que l’IA comprenne la situation et prenne les mesures correspondantes.
Pratiques Funcionalidades démontrées
La démo Magic Pointer a montré des exemples d’utilisation dans des feuilles de calcul. En plaçant le curseur sur deux colonnes et en disant « Fusionner », le système les a instantanément intégrés en une seule colonne. The feature also works in other contexts, such as image editing and location on maps. DeepMind a publié les principaux scénarios d’application :
- Colonnes automatiques Mesclagem dans les feuilles de calcul avec une commande simple
- Seleção et édition rapide de plusieurs éléments dans les images
- Pesquisa contextuel intégré au navigateur sans fenêtres d’assistance
- Comparação sélection automatique de produits lors de la sélection de plusieurs éléments sur des pages Web
- Ativação depuis Gemini directement par curseur pour des tâches spécifiques
Integração avec Chrome et Gemini
Google a expliqué que Magic Pointer fonctionnera également comme un activateur pour Gemini, l’intelligence artificielle intégrée au navigateur Chrome. Si un utilisateur sélectionne plusieurs produits sur une page Web et dit « Comparer », Gemini comparera automatiquement ces éléments sans avoir besoin d’ouvrir des onglets supplémentaires. L’intégration Essa vise à simplifier les flux de travail courants et à réduire le temps consacré aux tâches répétitives.
Le navigateur Chrome bénéficiera d’une prise en charge native de cette fonctionnalité, permettant aux utilisateurs de déclencher les capacités d’IA de Gemini via des sélections directes sur la page. Le modèle d’interaction Esse marque un abandon des interfaces conventionnelles basées sur de longues invites textuelles vers un système de commandes plus naturelles et contextualisées.
Disponibilidade actuel et futur
Les Usuários intéressés à tester Magic Pointer n’ont pas besoin d’attendre la sortie de Googlebook. Une version bêta est maintenant disponible sur le Google AI Studio, où vous pouvez essayer la fonctionnalité dans les scénarios d’édition d’images et de recherche de carte. L’accès à la version d’essai vous permet d’évaluer la précision du système et de fournir des commentaires avant l’intégration complète dans le nouvel ordinateur portable.
Le lancement du Googlebook avec Magic Pointer intégré est prévu pour fin 2024. La machine représente l’approfondissement de la stratégie Google en matière de matériel avec IA native, suivant les tendances établies par des concurrents tels que Apple et Microsoft avec leurs propres assistants intégrés. Le positionnement du Magic Pointer en tant que différenciateur suggère que le Google considère l’interaction avec l’IA non pas comme un module complémentaire distinct, mais comme un élément central de l’expérience de l’appareil.