Google ประกาศ Magic Pointer ซึ่งเป็นตัวชี้อัจฉริยะที่ทำงานในบริบทแบบเรียลไทม์และใช้ปัญญาประดิษฐ์เพื่อจดจำเนื้อหาบนหน้าจอ เครื่องมือนี้ได้รับการพัฒนาโดย DeepMind ซึ่งเป็นแผนกวิจัย AI ของบริษัท และเปิดเผยเมื่อวันที่ 12 พฤษภาคม ระบบกำลังได้รับการทดสอบใน Google AI Studio และจะถูกรวมเข้ากับแอปพลิเคชัน Googlebook Notes ใหม่ ซึ่งมีกำหนดเปิดตัวในปลายปี 2567
เมจิกพอยน์เตอร์ทำงานอย่างไร
Magic Pointer ทำงานด้วยวิธีที่เรียบง่ายและเป็นธรรมชาติ เมื่อผู้ใช้เลื่อนพอยน์เตอร์เล็กน้อย ระบบจะเปิดใช้งานและอ่านเนื้อหาบนหน้าจอโดยใช้ปัญญาประดิษฐ์ในการประมวลผลข้อมูล แตกต่างจากเครื่องมือ AI อื่นๆ ที่จำกัดเฉพาะหน้าต่างเฉพาะ Magic Pointer ทำงานได้โดยตรงในอินเทอร์เฟซผู้ใช้ โดยไม่ต้องใช้คำสั่งเฉพาะเจาะจงที่ยาว ผู้ใช้เพียงเลือกเนื้อหาที่หลากหลายและให้คำแนะนำทั่วไป ทำให้ AI เข้าใจบริบทและดำเนินการที่เกี่ยวข้อง
แสดงให้เห็นคุณสมบัติที่เป็นประโยชน์
ในการทดสอบ Magic Pointer มีการนำเสนอตัวอย่างการใช้งานในสเปรดชีตอิเล็กทรอนิกส์ เมื่อเคอร์เซอร์อยู่เหนือสองคอลัมน์และผู้ใช้พูดว่า “ผสาน” ระบบจะรวมคอลัมน์เหล่านั้นให้เป็นคอลัมน์เดียวโดยอัตโนมัติ ฟังก์ชันนี้ยังทำงานในบริบทอื่นๆ เช่น การแก้ไขรูปภาพและการค้นหาแผนที่ เครื่องมือนี้แสดงให้เห็นถึงความคล่องตัวในการใช้งานที่หลากหลาย
- รวมคอลัมน์ในสเปรดชีตด้วยคำสั่งง่ายๆ
- เลือกและแก้ไของค์ประกอบต่างๆ ในรูปภาพได้อย่างรวดเร็ว
- ค้นหารายการบนหน้าเว็บโดยไม่ต้องใช้หน้าต่างช่วยเหลือของเบราว์เซอร์
- เปรียบเทียบผลิตภัณฑ์โดยอัตโนมัติเมื่อเลือกบนเว็บไซต์ช้อปปิ้ง
- เปิดใช้งานราศีเมถุนโดยตรงด้วยเคอร์เซอร์สำหรับงานเฉพาะ
บูรณาการกับ Chrome และราศีเมถุน
Google อธิบายว่า Magic Pointer จะทำงานเป็นตัวเปิดใช้งานสำหรับ Gemini ซึ่งเป็นปัญญาประดิษฐ์ที่รวมอยู่ในเบราว์เซอร์ Chrome เมื่อผู้ใช้เลือกผลิตภัณฑ์หลายรายการบนหน้าเว็บและพูดว่า “เปรียบเทียบ” Gemini จะเปิดแท็บเพิ่มเติมและเปรียบเทียบสินค้าโดยอัตโนมัติโดยไม่จำเป็นต้องเปิดแท็บใหม่ การบูรณาการนี้ทำให้ขั้นตอนการทำงานทั่วไปง่ายขึ้น ช่วยประหยัดเวลาในการทำงานซ้ำๆ โมเดลไดอะล็อกได้รับการพัฒนาเพื่อย้ายออกจากอินเทอร์เฟซแบบเดิมโดยอิงตามการแจ้งที่ยาว ค้นหาคำสั่งที่เป็นธรรมชาติและมีบริบทมากขึ้น
เบราว์เซอร์ Chrome จะได้รับการสนับสนุนในตัวสำหรับฟังก์ชันนี้ ทำให้ผู้ใช้สามารถเรียกใช้ฟีเจอร์ AI ผ่านการเลือกโดยตรงบนหน้าเว็บได้ แนวทางนี้แสดงให้เห็นถึงวิวัฒนาการของวิธีที่ผู้คนโต้ตอบกับผู้ช่วยดิจิทัล ทำให้กระบวนการมีความลื่นไหลมากขึ้นและขึ้นอยู่กับคำสั่งที่ซับซ้อนน้อยลง
ความพร้อมใช้งานในปัจจุบันและแนวโน้มในอนาคต
ผู้ใช้ที่สนใจทดสอบ Magic Pointer ไม่จำเป็นต้องรอ Googlebook เปิดตัว ขณะนี้เวอร์ชันเบต้าพร้อมใช้งานแล้วบน Google AI Studio ซึ่งคุณสามารถลองใช้เครื่องมือในการแก้ไขภาพและการค้นหาแผนที่ได้ เมื่อเข้าถึงเวอร์ชันทดลอง ระบบจะประเมินความถูกต้องแม่นยำและให้ข้อเสนอแนะสำหรับการปรับปรุงก่อนที่จะรวมเข้ากับแอปบันทึกใหม่โดยสมบูรณ์
Googlebook มีกำหนดการเปิดตัวในช่วงปลายปี 2567 ถือเป็นการเข้าสู่ตลาดอย่างเป็นทางการของ Magic Pointer โครงการริเริ่มนี้สะท้อนให้เห็นถึงกลยุทธ์ของ Google ในการเพิ่มบทบาทของตนในผู้ช่วย AI ที่รวมฮาร์ดแวร์ให้ลึกซึ้งยิ่งขึ้น ตามแนวโน้มที่กำหนดโดย Apple และ Microsoft ตำแหน่งของ Magic Pointer ในฐานะผู้สร้างความแตกต่างบ่งชี้ว่า Google กำลังรวมศูนย์ประสบการณ์ผู้ใช้ไว้ที่การโต้ตอบตามธรรมชาติกับ AI โดยรวมบทบาทของปัญญาประดิษฐ์เป็นองค์ประกอบหลักของอุปกรณ์สมัยใหม่