Praktisk med Googles visuelle søk for Android

click fraud protection

Eksklusiv praktisk med Googles nye visuelle søk-funksjon for Google-appen i Android. Kan dette være Google Lens-produktet fra I/O?

Med så mye informasjon der ute i verden, er søkemotorer på Internett avgjørende for å tilegne seg kunnskap. Tilgjengelig via nettleseren på din stasjonære eller bærbare PC, en dedikert app på smarttelefonen eller nettbrettet, eller via din stemme på en smartklokke eller hjemmeassistent - du har så mange alternativer tilgjengelig for å finne informasjonen du leter etter. Det store flertallet av nettsøk utføres fortsatt via tekstforespørsler, selv om fremveksten av Google Goggles var en lovende start på å bringe visuelt søk til massene. Dessverre har Goggles falt ved siden av på grunn av mangel på oppdateringer, men den nylige kunngjøringen av Google Lens at I/O ser ut til å gjenopplive konseptet. Vi var i stand til å komme i gang med Google-appens nye visuelle søk-funksjon, selv om vi ikke kan bekrefte om dette er den samme funksjonen som Google Lens.


Googles visuelle søk

Fra det lille vi vet om hvordan Google Lens faktisk fungerer, ser det ut til å være Google Goggles på steroider. Googles bildegjenkjenning er allerede utrolig kraftig, men takket være Googles voksende AI-evne Google Lens vil ikke bare være i stand til å identifisere alle forskjellige typer objekter, men det vil også være i stand til å gi kontekstuelle resultater. Lens vil kunne kommunisere med andre Google-tjenester for å gi mer personlig tilbakemelding.

I teorien i alle fall. I tillegg til en rask demonstrasjon på Google I/O som viser WiFi-nettverkstilkobling, er det mange detaljer om Google Lens som vi ikke vet om. Men i det minste kan vi ta en titt på hvordan grensesnittet kan se ut i Google-appen.

Vær oppmerksom på at følgende skjermbilder kanskje ikke er representative for det endelige Google Visual Search-produktet. Funksjonen er tydelig merket som "BETA", så problemene våre med tjenesten (detaljert nedenfor) kan være løst ved den endelige utgivelsen. Videre betyr dette at grensesnittet kan endres.

Som du kan se, består grensesnittet av en stor kamerasøker i øvre halvdel av skjermen sammen med en liste over kategorier nederst. Bildegjenkjenningskategoriene består av:

  • Alle
  • Klær
  • Sko
  • Håndvesker
  • Solbriller
  • Strekkoder
  • Produkter
  • Steder
  • Katter
  • Hunder
  • Blomster

Når du velger en kategori, mistenker vi at Visual Search begrenser databasen for å fullføre spørringen mye raskere. I alle fall, når du har valgt en kategori (eller holder deg til "alle"), så trykker du bare hvor som helst i kamerasøkeren for å begynne å søke. Hvis området rundt er for mørkt, kan du aktivere kamerablitsen ved å trykke på blitsikonet øverst i venstre hjørne.

Hvis du utfører et søk, får du opp en liste over resultater med kortvisning. Du kan sveipe til venstre og høyre for å se alle resultatene. Hvis du trykker på et resultat, åpnes en Google-søkeside relatert til det objektet eller produktet, men du kan enkelt velg å gå gjennom søkesiden på et annet resultat ved å bla gjennom minikortvisningen på toppen av søket side. Å åpne menyen med tre prikker på et hvilket som helst visuelt søkeresultat gir også muligheten til å få direkte tilgang til bildekilden, omtrent som Googles bildesøk på skrivebordet.

Vi testet Visual Search på både statiske bilder hentet fra nettet så vel som levende bilder. Som du forventer, fungerer visuelt søk beundringsverdig på statiske bilder, men vi klarte ikke å få denne betaversjonen til å fungere med levende bilder. Jeg prøvde å få den til å gjenkjenne en DualShock 4 trådløs kontroller for PlayStation 4 så vel som min egen Google Home, men i ingen av tilfellene klarte den å gjenkjenne den. Gitt det faktum at dette er en beta-testversjon som vi får tak i, kan vi ikke si at dette er en feil ved produktet. Jeg ville ærlig talt blitt sjokkert hvis live-versjonen av Visual Search ikke ville være i stand til å gjenkjenne noe sånt som et Google Home (selv om en del av meg håper at det på en morsom måte ville forveksle det som en luft oppfrisker).


Er visuelt søk det samme som Google Lens?

Ingen av søkene vi utførte viste noen tegn til intelligensen som Google Lens demonstrerte på scenen ved Google I/O. Imidlertid viser flere strenger i den nyeste Google App APK-filen en forbindelse mellom de to. I layoutfilen search_widget.xml er det en linje som nevner at Google-søkemodulen kan legge til en knapp for å starte visuelt søk. Men det som er mest interessant er det faktum at trekkbaren som visuelt identifiserer denne funksjonen for brukeren, heter «google_lens».

<ImageButtonandroid: orientation="horizontal"android:android: background="@drawable/search_box_click_on_transparent"android: paddingLeft="8.0dip"android: paddingTop="8.0dip"android: paddingBottom="8.0dip"android: visibility="gone"android: layout_width="56.0dip"android: layout_height="fill_parent"android: src="@drawable/google_lens"android: scaleType="centerInside"android: contentDescription="@string/accessibility_visual_search_button"android: layoutDirection="locale" />

Dette ikonet, vist ovenfor, er nøyaktig den samme logoen som ble vist under Google Lens-kunngjøringen på Google I/O.

I tillegg vises det samme ikonet i en annen fil, kalt navigation_menu.xml. Denne filen definerer hvilke elementer som skal vises i sidefeltmenyen til Google-appen. Navnet på denne nye funksjonen vil bli kalt Visual Search, men ikonet er fra Lens.

<com.google.android.apps.gsa.shared.ui.drawer.DrawerEntryandroid:android: tag="ve=37333;track: click"android: visibility="gone"android: layout_width="fill_parent"android: layout_height="wrap_content"thegoogle: imageSrc="@drawable/quantum_ic_google_lens_grey600_24"thegoogle: text="@string/visual_search" />

Dermed er det ikke så vanskelig å sette sammen to-og-to. Det er svært sannsynlig at Googles visuelle søk faktisk er Google Lens, men det som gjør meg litt nølende er det faktum at dette er tilgjengelig fra Google-appen i stedet for fra Google Assistant, som er det som ble lovet på Google I/O. Pluss, siden jeg ikke klarte å få noen av de smarte funksjonene til å fungere (og grensesnittet lignet ikke den som vises på Google I/O), kan jeg ikke definitivt påstå at det jeg lekte med er Google Linse.

Likevel er vi spente på å se hvor godt Google Lens fungerer i praksis, spesielt gitt den ganske skuffende innsatsen fra Samsungs Bixby Vision. Googles I/O-demonstrasjon var ryddig, men jeg ville personlig ventet til vi kan prøve det selv.


Hva synes du om Google Lens? Gi oss beskjed om dine tanker i kommentarene nedenfor!