Google、新しいGooglebook向けにAIを搭載したスマートポインター「Magic Pointer」を発表

Google は、リアルタイムのコンテキスト認識で動作するスマート マウス ポインターである Magic Pointer を発表しました。このツールは、同社の人工知能研究部門であるDeepMindによって5月12日に発表された。この機能はすでに Google AI Studio でテストされており、2024 年後半に発売予定の新しい AI ラップトップである Googlebook に統合される予定です。

マジック ポインターの仕組み

Magic Pointer は複雑なコマンドを必要とせずに直感的に操作できます。ポインターを動かすだけでシステムが起動し、画面の内容をフルコンテキストで読み取り、高度な人工知能モデルを使用して情報を処理します。専用ウィンドウに限定されている従来の AI ツールとは異なり、Magic Pointer はユーザー インターフェイス内で直接動作するため、より自然で高速な操作が可能になります。

あわせて読みたい: Google、新しい Googlebook の発売に向けて AI を活用した Magic Pointer を発表

ユーザーは長くて具体的な指示を書く必要はありません。さまざまなコンテンツを選択し、一般的な指示を与えるだけで、AI が状況を理解し、対応するアクションを実行します。このインタラクション モデルは、テキスト プロンプトに基づく従来のインターフェイスからの脱却を示し、より自然でコンテキストに応じたコマンド システムを目指しています。

実用的な機能を実証

Magic Pointer のデモでは、スプレッドシート、画像、Web ブラウジングでの使用例が示されました。スプレッドシート内の 2 つの列の上にカーソルを置き、「結合」と言うと、システムは即座にそれらを 1 つの列に結合します。この機能は、画像編集や地図上の位置など、他のコンテキストでも機能します。 DeepMind は、主要なアプリケーション シナリオをリリースしました。

経緯をみる: Google、人工知能でカーソルを再発明する Magic Pointer を発表

• 簡単なコマンドでスプレッドシート内の列を自動的にマージします
• 画像内の複数の要素を素早く選択して編集する
• ヘルパー ウィンドウを使用しないブラウザ統合コンテキスト検索
• Web ページ上で複数のアイテムを選択すると、自動的に製品が比較されます。
• 特定のタスクに対してカーソルによって直接 Gemini をアクティブ化する

Chrome および Gemini との統合

Magic Pointer は、Chrome ブラウザに統合された人工知能である Gemini のアクティベーターとして機能します。ユーザーが Web ページ上で複数の製品を選択して「比較」と言った場合、Gemini は追加のタブを開かなくても、これらの項目を自動的に比較します。この統合により、一般的なワークフローが簡素化され、反復的なタスクにかかる時間が削減されます。

Chrome ブラウザはこの機能のネイティブ サポートを受け、ユーザーはページ上の直接選択を通じて Gemini の AI 機能をトリガーできるようになります。このモデルは、人間と機械の間のインタラクション形式の進化を示し、エクスペリエンスをより流動的にし、従来のインターフェイスへの依存を減らします。

入手可能性とリリース

Magic Pointer のテストに興味のあるユーザーは、Googlebook の発売を待つ必要はありません。 Google AI Studio でベータ版が利用可能になり、画像編集や地図検索のシナリオで機能を試すことができます。試用版にアクセスすると、新しいラップトップに完全に統合する前に、システムの精度を評価し、フィードバックを提供できます。 Magic Pointer が統合された Googlebook の発売は 2024 年末に予定されており、ネイティブ人工知能を備えたハードウェアにおける Google の戦略の深化を表しています。

全記事一覧: 最新ニュース (JA)