Forbedret virkelighet blir hilst neste store ting på mobilenheter, for alt fra spill til å sjekke ut boligpriser; pek på en smarttelefon som kjører Yelp på en bygate, og Monocle-funksjonen gir deg vurderinger og vurderinger for bedriftene der.

Google Goggles kan gjøre mye det samme, men Goggles produktsjef Shailesh Nalawadi er ikke interessert i AR: "Vi ser egentlig ikke oss som arbeider med forstørret virkelighet, vi jobber med visuelt søk."

Det er slik menneskene jobber, peker han på, så det er bare fornuftig å søke på jobb visuelt. "80% av informasjonen forbrukes visuelt, og ikke gjennom noen av de andre sansene. Hvorfor er det å oversette og transkribere det du ser på ord?"

Selv om Nalawadi er realistisk om hva du kan gjøre med et telefonkamera i dag ("Bildegjenkjenning er veldig vanskelig selv om det ikke er mangel på Hollywood-filmer som viser dette som allerede oppnådd!"), Tror han ikke at vi trenger plasseringsbevisste briller eller de digitale kontaktlinsene anslås å være på salg innen 2020; som navnet Goggle antyder, er telefonen seeren.

"Du har disse veldig raske datamaskiner som vi alle bærer rundt i lommene våre, som har muligheter du ikke hadde hatt på skrivebordet for bare fem eller ti år siden," sier han.

"Selvfølgelig, uansett hvor kraftige disse enhetene er, har datamaskinens visjon en måte å ta opp alle CPU-syklusene du har, så Goggles tar vare på det tunge løftet over i skyen."

Det virker bare på grunn av mobilt bredbåndsforbindelser, og mens Nalawadi kaller den tre til åtte sekunder anerkjennelsestiden som Goggles vanligvis tar "ganske fenomenal" innrømmer han, "vi innser også at det ikke er nok fordi folkens oppmerksomhetsspenner er veldig korte."

Langt fra ferdig

Goggles er frukten av tre til fem års forskning, og det er langt fra ferdig, sier han.

"Vi kjempet og vi bygde denne tingen hvor du kan bevege kameraet ditt, peke det på et objekt og få det til å komme tilbake og fortelle deg hva det er som det ser på. Virkeligheten er at vi er veldig langt fra den staten."

Hva Nalawadi ønsker å gjøre er mye mer ambisiøst enn bare legging informasjon om hvor du er på skjermen; han vil ha visuelt søk som kan håndtere hele verden.

"For det første, forklarer han," handler det om å utvide anerkjennelsesegenskapene til våre datamaskiner. Akkurat nå har vi et meget smalt sett med titalls millioner objekter som vi gjenkjenner, men verden er mye større enn titalls millioner objekter, og det er en fenomenal innsats for å prøve å få denne informasjonen i vår database og gjenkjenne den. "

SE OG SØK: Goggles behandler landemerker som logoer og strekkoder; det forteller deg hva du ser på og bringer opp søkeresultatene

Over tid vil Goggles gjenkjenne planter og sjakkspill, og snart vil det oversette tekst på ting du ser.

Gjøre databasen med bilder Goggles kan matche større er bare starten. Det er det grunnleggende søkeproblemet: "Vi bruker mye tid på søkekvalitet, når det er en vellykket kamp, ​​hva er de relevante resultatene som må komme tilbake?"

Et bredere problem

Men Nalawadi vil også takle det mye bredere problemet. "For øyeblikket er det denne oppfatningen at forstørret virkelighet handler om visning av kuraterte geodata. Jeg tror det er veien mer informasjon i den scenen, og du trenger virkelig bildegjenkjenning lagt over dette for å gi mer informasjon om hva som skjer rundt deg. "

Han mener også at bildegjenkjenning vil gjøre den forbedrede virkelighetsopplevelsen bedre enn den omtrentlige stillingen dagens smarttelefoner kan regne ut.