מעשי עם החיפוש החזותי של גוגל לאנדרואיד

מעשי בלעדי עם תכונת החיפוש החזותי החדשה של גוגל עבור Google App באנדרואיד. האם זה יכול להיות מוצר Google Lens מ-I/O?

עם כל כך הרבה מידע בעולם, מנועי חיפוש באינטרנט הם חיוניים לרכישת ידע. נגיש דרך דפדפן האינטרנט במחשב השולחני או הנייד שלך, אפליקציה ייעודית בטלפון החכם או הטאבלט שלך, או דרך שלך קול בשעון חכם או במכשיר עוזר ביתי - יש לך כל כך הרבה אפשרויות זמינות כדי למצוא את המידע שאתה מחפש. הרוב המכריע של חיפושי האינטרנט עדיין מבוצעים באמצעות שאילתות טקסט, אם כי הופעתן של משקפי גוגל הייתה התחלה מבטיחה בהבאת החיפוש החזותי להמונים. למרבה הצער, המשקפיים נפלו מהדרך עקב חוסר עדכונים, אך ההכרזה האחרונה של Google Lens נראה כי ב-I/O מחייה את הרעיון. הצלחנו להתנסות בתכונת החיפוש החזותי החדשה של Google App, אם כי איננו יכולים לאשר אם זו אותה תכונה כמו Google Lens.


החיפוש החזותי של גוגל

מהמעט שאנחנו יודעים על איך Google Lens עובדת בפועל, נראה שמדובר ב-Google Goggles על סטרואידים. זיהוי התמונות של גוגל כבר חזק להפליא, אבל הודות ליכולת הבינה המלאכותית ההולכת וגדלה של גוגל Google Lens לא רק יוכל לזהות את כל סוגי האובייקטים השונים, אלא הוא גם יוכל לספק הקשר תוצאות. Lens תוכל להתממשק עם שירותי Google אחרים כדי לספק משוב מותאם אישית יותר.

בתיאוריה, בכל מקרה. מלבד הדגמה מהירה ב-Google I/O המציגה חיבור לרשת WiFi, יש הרבה פרטים על Google Lens שאנחנו לא יודעים עליהם. אבל לכל הפחות, אנחנו יכולים להסתכל איך הממשק שלו עשוי להיראות בתוך Google App.

שים לב שייתכן שצילומי המסך הבאים אינם מייצגים את המוצר הסופי של Google Visual Search. התכונה מסומנת בבירור כ"ביטא", כך שהבעיות שלנו עם השירות (מפורטות למטה) עשויות להיפתר עד לגרסה הסופית. יתר על כן, המשמעות היא שהממשק עשוי להיות נתון לשינויים.

כפי שניתן לראות, הממשק מורכב מעינית מצלמה גדולה בחצי העליון של המסך יחד עם רשימת קטגוריות בתחתית. קטגוריות זיהוי התמונות מורכבות מ:

  • את כל
  • הַלבָּשָׁה
  • נעליים
  • תיקי יד
  • מישקפי שמש
  • ברקודים
  • מוצרים
  • מקומות
  • חתולים
  • כלבים
  • פרחים

כאשר אתה בוחר קטגוריה, אנו חושדים ש-Visual Search מצמצם את מסד הנתונים שלה כדי להשלים את השאילתה הרבה יותר מהר. בכל מקרה, לאחר שבחרתם קטגוריה (או נשארו עם "הכל"), אז כדי להתחיל לחפש פשוט הקש על מקום כלשהו בעינית המצלמה. אם האזור שמסביב חשוך מדי, תוכל להפעיל את פלאש המצלמה על ידי הקשה על סמל הפלאש בפינה השמאלית העליונה.

ביצוע חיפוש יביא רשימה של תצוגת כרטיס של תוצאות. אתה יכול להחליק שמאלה וימינה כדי לראות את כל התוצאות. הקשה על תוצאה תפתח דף חיפוש בגוגל הקשור לאותו אובייקט או מוצר, אם כי אתה יכול בקלות בחר לעבור בדף החיפוש בתוצאה אחרת על ידי גלילה בתצוגת הכרטיס המיני בראש החיפוש עמוד. פתיחת תפריט שלוש הנקודות בכל תוצאת חיפוש ויזואלית מעלה גם את היכולת לגשת ישירות למקור התמונה, בדומה לחיפוש התמונות בשולחן העבודה של גוגל.

בדקנו חיפוש חזותי הן בתמונות סטטיות שמקורן באינטרנט והן בתמונות חיות. כפי שהייתם מצפים, חיפוש חזותי מתפקד בצורה יוצאת דופן בתמונות סטטיות, אך לא הצלחנו לגרום לגרסת הבטא הזו לעבוד עם תמונות חיות. ניסיתי לגרום לזה לזהות בקר אלחוטי DualShock 4 עבור ה-PlayStation 4 כמו גם את Google Home שלי, אבל בשני המקרים הוא לא הצליח לזהות אותו. בהתחשב בעובדה שמדובר בגרסת בדיקות בטא שאנו שמים עליה יד, איננו יכולים לומר שזוהי תקלה של המוצר. אני באמת אהיה בהלם אם הגרסה החיה של Visual Search לא תוכל לזהות משהו כמו Google Home (אם כי חלק ממני מקווה שהוא יטעה בצורה מצחיקה את זה כשיר מטהר).


האם חיפוש חזותי זהה ל-Google Lens?

אף אחד מהחיפושים שביצענו לא הראה סימנים כלשהם לאינטליגנציה ש-Google Lens הפגינה על הבמה ב-Google I/O. עם זאת, מספר מחרוזות בקובץ ה-APK האחרון של Google App מציגות קשר בין השניים. בתוך קובץ הפריסה search_widget.xml נמצאת שורה שמזכירה ש-widget החיפוש של Google עשוי להוסיף לחצן להפעלת חיפוש חזותי. אבל מה שהכי מעניין הוא העובדה שה- drawable שיזהה ויזואלית את התכונה הזו למשתמש נקראת "google_lens".

<ImageButtonandroid: orientation="horizontal"android:android: background="@drawable/search_box_click_on_transparent"android: paddingLeft="8.0dip"android: paddingTop="8.0dip"android: paddingBottom="8.0dip"android: visibility="gone"android: layout_width="56.0dip"android: layout_height="fill_parent"android: src="@drawable/google_lens"android: scaleType="centerInside"android: contentDescription="@string/accessibility_visual_search_button"android: layoutDirection="locale" />

סמל זה, המוצג למעלה, הוא אותו לוגו בדיוק שהוצג במהלך ההכרזה של Google Lens ב-Google I/O.

בנוסף, אותו סמל מופיע בקובץ אחר, הנקרא navigation_menu.xml. קובץ זה מגדיר אילו רכיבים יופיעו בתפריט סרגל הצד של Google App. השם של הפיצ'ר החדש הזה ייקרא חיפוש חזותי אבל הסמל שלו הוא מ-Lens.

<com.google.android.apps.gsa.shared.ui.drawer.DrawerEntryandroid:android: tag="ve=37333;track: click"android: visibility="gone"android: layout_width="fill_parent"android: layout_height="wrap_content"thegoogle: imageSrc="@drawable/quantum_ic_google_lens_grey600_24"thegoogle: text="@string/visual_search" />

לכן, זה לא קשה מדי לחבר שניים ושתיים ביחד. שֶׁלָה סביר מאוד שהחיפוש החזותי של גוגל הוא למעשה Google Lens, אם כי מה שגורם לי קצת להסס היא העובדה שהגישה הזו נגישה מאפליקציית Google ולא מתוך Google Assistant, שזה מה שהובטח ב-Google I/O. בנוסף, מכיוון שלא הצלחתי להפעיל אף אחת מהתכונות החכמות (והממשק לא היה דומה לזה זה שמוצג ב-Google I/O), אני לא יכול לטעון באופן סופי שמה ששיחקתי איתו הוא גוגל עֲדָשָׁה.

ובכל זאת, אנחנו נרגשים לראות כמה טוב Google Lens עובדת בפועל, במיוחד לאור המאמץ המאכזב למדי מצד Bixby Vision של סמסונג. הדגמת ה-I/O של גוגל הייתה מסודרת, אבל אני אישית הייתי מתאפקת עד שנוכל לנסות אותה בעצמנו.


מה אתה חושב על Google Lens? ספר לנו את המחשבות שלך בתגובות למטה!