גוגל משיקה אוטומציה מתקדמת חדשה של Gemini עבור אפליקציות ב-Pixel 10 ו-Galaxy S26
גוגל החלה להשיק תכונה חדשה לאוטומציה של משימות מרובות שלבים עבור עוזר ה-Gemini במכשירים ניידים נבחרים. הפונקציונליות החדשה מאפשרת לבינה מלאכותית לבצע פעולות מורכבות ישירות בתוך אפליקציות צד שלישי, ללא צורך בהתערבות ידנית מתמדת של בעל הסמארטפון עבור כל קליק או גלילה.
התכונה החדשה מגיעה בתחילה בפורמט בטא ומוגבלת לדגמים החדשניים ביותר בשוק הטכנולוגיה הניידת. המכשירים הכלולים בשלב הראשון של ההטמעה כוללים את גרסאות Google Pixel 10, Pixel 10 Pro ו-Pixel 10 Pro XL, בנוסף לכל סדרת המכשירים של Samsung Galaxy S26, אשר להם ארכיטקטורת עיבוד ייעודית לפונקציות אלו.
ההשקה הרשמית התקיימה במקביל בארצות הברית ובקוריאה, שווקים שנבחרו אסטרטגית כדי לבדוק את יציבות הכלי בתרחישי שימוש אינטנסיבי לפני השקה עולמית. הפעלת המערכת פשוטה, מצריכה פקודה קולית מפורטת בלבד לאחר לחיצה ארוכה על כפתור הצד של המכשיר.
ביצוע פקודות מורכבות בחיי היומיום
החידוש העיקרי של המערכת טמון ביכולתה לפרש ולבצע בקשות הדורשות ניווט רציף דרך מסכים, תפריטים ותיבות דיאלוג שונות. העוזרת הדיגיטלית לוקחת שליטה זמנית על ממשק האפליקציה הנבחרת לביצוע פעולות מעשיות, כמו בקשת הסעה פרטית מנקודה אחת לאחרת או הזמנת ארוחות ספציפיות בפלטפורמות משלוח.
במהלך תהליך הביצוע, בינה מלאכותית מנתחת את האפשרויות הקיימות בממשק הגרפי, ממלאת טפסי כתובת ובוחרת פריטים בהתאם להעדפות ההיסטוריות של המשתמש. למערכת נעילת אבטחה שמשהה אוטומטית את הפעולה ומבקשת אישור סופי על המסך לפני השלמת כל עסקה פיננסית או אישור הזמנה.
פעולה בסביבה וירטואלית מבודדת
כדי להבטיח את שלמות הנתונים האישיים, Gemini מריץ את כל האוטומציות בתוך חלון וירטואלי מאובטח המבודד לחלוטין משאר מערכת ההפעלה של הסמארטפון. שיטת אנקפסולציה זו מונעת מבינה מלאכותית לגשת למידע לא מורשה, לקרוא מסמכים פרטיים או לשנות הגדרות מכשיר קריטיות בזמן גלישה ביישומי צד שלישי.
העוזר ממלא בקפדנות את ההוראות הניתנות בפקודה הקולית הראשונית, ומגביל את פעולתה אך ורק להיקף המשימה המבוקשת על ידי האדם. אם המשתמש יבקש לקנות אספרסו, הכלי יפתח רק את אפליקציית בית הקפה המתאימה, תוך התעלמות מוחלטת מהודעות טקסט, מיילים לעבודה או גלריות תמונות שנמצאות בזיכרון המכשיר.
ארכיטקטורת התוכנה שפותחה עבור פונקציה זו מאפשרת לתהליך להתרחש באופן בלתי נראה ברקע או באמצעות ממשק שקוף על המסך הראשי. זה מבטיח שהזרימה הרגילה של השימוש בטלפון לא תופרע בפתאומיות, מה שמאפשר לאדם להמשיך לקרוא מאמר או לצפות בסרטון בזמן עיבוד ההזמנה.
יישומים תואמים בשלב הבדיקות
בשלב ראשוני זה של בדיקות ציבוריות, הפונקציונליות מכסה קטגוריות ספציפיות של שירותים לפי דרישה שהם חלק מהשגרה היומיומית של מיליוני צרכנים. התמיכה הרשמית בהשקה כוללת פלטפורמות פופולריות למשלוח מזון כמו DoorDash, Grubhub ו-Uber Eats, מה שמקל על חזרה על הזמנות שגרתיות עם רק משפט מדובר.
במגזר הניידות העירונית, המערכת משתלבת באופן טבעי עם יישומי Uber ו- Lyft כדי לייעל את הנסיעות בערים. המשתמש יכול פשוט להזין את היעד הרצוי בשפה טבעית, והעוזר דואג לפתוח את המפה, להזין את הכתובת המדויקת, להשוות בין קטגוריות רכב זמינות והצגת הערכת המחיר הסופית לאישור.
עבור ציוד לבית, אינטגרציה עם שירות Instacart מאפשרת להרכיב במהירות עגלות קניות וירטואליות על סמך רשימות קניות קודמות או מתכונים ספציפיים. בינה מלאכותית יכולה לזהות את המוצרים המבוקשים, לחפש את האפשרויות הטובות ביותר בקטלוג החנות ואף להציע תחליפים ראויים אם פריט מסוים אזל מהמלאי במפעל הנבחר.
בשוק הדרום קוריאני, שלב הבטא כולל שירותים מקומיים בעלי ביקוש גבוה כדי להתאים את מודל השפה לתרבויות צריכה ולממשקים אזוריים שונים. יישומים עם טווח הגעה רחב בארץ, כמו Kakao T לניידות ו-Kaemin למזון, נכללו ברשימת התאימות כדי להבטיח שהבדיקות משקפות את השימוש בפועל של האוכלוסייה המקומית.
עיבוד מקומי ואופטימיזציה של חומרה
הבלעדיות הזמנית של התכונה עבור קווי Pixel 10 ו-Galaxy S26 נובעת מהצורך ההכרחי בחומרה מותאמת במיוחד לעיבוד דגמי בינה מלאכותית ישירות על המכשיר. סמארטפונים אלה מצוידים ביחידות עיבוד עצביות חדישות המסוגלות להתמודד עם העומס החישובי האדיר הנדרש לניווט באפליקציות אוטונומיות מבלי להסתמך רק על שרתי ענן. גישת עיבוד היברידי זו מפחיתה באופן דרסטי את זמן ההשהיה של תגובות העוזר ומבטיחה שביצוע המשימות מתרחש בצורה חלקה וללא שיהוקים, גם במצבים בהם הקישוריות לאינטרנט הנייד אינה יציבה או איטית.
השותפות הטכנית בין יצרני החומרה וצוות הפיתוח של מערכות ההפעלה הביאה לאינטגרציה עמוקה בין העוזר הוירטואלי לשכבה הפיזית של המכשירים הניידים. ביצוע משימות מקומי לא רק משפר את מהירות האוטומציות היומיומיות, אלא גם מפחית את צריכת הסוללה בהשוואה לתהליכים ישנים שדרשו העברה מתמדת של מנות נתונים דרך האינטרנט. מערכת ההפעלה יכולה לזהות את דפוסי השימוש של הבעלים ולהקצות באופן דינמי משאבי RAM, מה שמבטיח שהטלפון שומר על ביצועי גלישה שיא בזמן שהעוזר עובד בשקט כדי לבצע פקודות מורכבות ברקע.
בקרה וניטור רציף של פעולות
למרות מידת האוטונומיה הגבוהה המוענקת לבינה מלאכותית לניווט בממשקים, ארכיטקטורת המערכת תוכננה במטרה לשמור על בעל המכשיר בשליטה מוחלטת בכל שלבי הפעולה הדיגיטלית. בכל עת תוך כדי ביצוע משימה מורכבת, המשתמש מקבל התראות ויזואליות והתראות בזמן אמת המפרטות בדיוק איזו פעולה העוזרת עושה באותה אלפיות השנייה, כמו בחירת מסעדה ספציפית מהקטלוג או הזנת כתובת למשלוח בטופס. אם הכלי נתקל בחוסר בהירות במהלך התהליך, כמו שני סניפים של אותה חנות הממוקמים קרוב למיקום היעד, הוא עוצר את זרימת האוטומציה באופן מיידי ומציג פאנל על המסך המבקש הבהרה מילולית או הקשה לאישור. בנוסף, יש לחצן ביטול חירום גלוי תמיד בממשק שכבת-העל, המאפשר לך לבטל את האוטומציה באופן מיידי, לסגור את החלון הווירטואלי המאובטח ולהחזיר את השליטה הידנית על המסך. שכבת פיקוח קפדנית זו חיונית כדי למנוע רכישות בשוגג, שליחת רכבי הובלה למקומות לא נכונים או כל פעולה לא רצויה אחרת שעלולה לגרום אי נוחות או הפסדים כספיים, כדי להבטיח שהטכנולוגיה פועלת אך ורק כמנחת שגרה ולעולם לא כגורם עצמאי ללא פיקוח אנושי מתאים.
התרחבות גיאוגרפית ושפות חדשות
זמינות נוכחית מוגבלת לשווקים בארה”ב וקוריאנית משמשת כמעבדה בזמן אמת לשיפור מתמיד של ניווט חזותי ואלגוריתמים להבנת הקשר. הרחבת התכונה למדינות חדשות והכללת תמיכה בשפות אחרות יתרחשו בהדרגה במהלך החודשים הקרובים, באופן ישיר בהתאם לתוצאות היציבות המתקבלות בשלב בדיקה זה והתאמת המערכת לפריסות אפליקציות אזוריות שונות.
שינוי פרדיגמת האינטראקציה הניידת
הצגתם של סוכנים אוטונומיים המסוגלים להפעיל ממשקים גרפיים במערכת האקולוגית הניידת מייצגת התפתחות טכנית משמעותית באופן שבו אנשים מתקשרים עם הסמארטפונים שלהם. המעבר מפקודות בסיסיות המבוססות על הקשות חוזרות על המסך להוראות מילוליות מקיפות המייצרות פעולות קונקרטיות מקטין את הזמן המושקע במשימות בירוקרטיות בחיי היומיום הדיגיטליים.
ההתמקדות בפיתוח כלים המפעילים יישומי צד שלישי באופן עצמאי מדגים את הבשלתן של רשתות עצביות המיושמות לצריכה ולפרודוקטיביות. הציפייה הטכנית היא שהעוזר יוכל לנהל שגרות מורכבות ומקושרות עוד יותר בעדכונים עתידיים, ולגבש מכשירי פרימיום כמרכזי פיקוד אוטומטיים אמיתיים לחיים עירוניים.
