Siri, Alexa, Google Assistant, Cortana ... hver stor merkevare dykker inn i den elektroniske verden av digitale assistenter. Facebook og Amazon står med skulder til skulder med Google og Apple i å gjøre kunstig intelligens en viktig del av fremtidige planer ... Samsung har vært bemerkelsesverdig i fravær.

Men mens den gjorde startlinjen med sin egen digitale assistent Bixby i mars (sammen med lanseringen av Galaxy S8 og S8 Plus), var det ikke for høyt fanfare.

Les mer: Samsung NU8000 (UN55NU8000, UE55NU8000)

Kodet på en maskinvareknapp på siden av telefonene, åpnet Bixby bare en enkelt skjerm som hadde informasjon om dine kommende avtaler, helsemessige opplysninger eller nyskapende nyheter.

“Vi er ikke sent til spillet, vi er nye i spillet ... fordi vi spiller et annet spill”

Injong Rhee

I vår anmeldelse oppdaget vi at Bixby var “gjennomsnittlig i beste fall, og ganske mye ubrukelig i verste fall”, i stor grad fordi det ikke gjorde noe ... noe. Bixby Home var bare en annen portal, og Bixby Vision, innebygd i kameraet, var unøyaktig og for grunnleggende for å garantere et sted på en avansert smarttelefon som dette.

Som Bixby Voice er endelig ruller ut over hele verden, og som vi venter på lanseringen av Galaxy Note 8 så vi dypere ut for å prøve å finne ut hva Samsung faktisk prøver å gjøre.

Et arbeid pågår

Det ville være lett bare å avvise Bixby som en halvbakket idé, en lanserte for tidlig og ville sannsynligvis bli hengt stille om noen få måneder.

Men - - det er noe om Samsungs holdning bak scenene med Bixby som får meg til å føle at det er mer til dette enn å møte øyet. Alle jeg snakker med er altfor sikre på at Bixby vil bli en suksess, til tross for lanseringen i et utrolig funksjonsrikt smarttelefonmarked hvor Siri og andre har jobbet i årevis.

Injong Rhee er administrerende direktør og leder av FoU, programvare og tjenester for Samsung Mobile, og ansvarlig for Bixbys opprettelse. I et omfattende intervju er han så avslappet over Bixby-programmet som han opprettet at det er nesten alarmerende når man vurderer betydningen av et prosjekt som dette må ha for en multi-billion dollar selskap.

Injong Rhee, administrerende direktør og leder av FoU, programvare og tjenester for Samsung Mobile

“Bixby er mer som et grensesnitt, som lar deg gjøre flere ting med telefonen din,” Rhee forteller meg. “Det er, vi vet, vi sier intelligent fordi det gir en masse naturlig måte å samhandle med mennesker.”

Det er den viktigste forskjellen at Samsung banker på, at Bixby skal tilby mer enn Apple, Google og Amazon bringer bordet med sine stemmeassistenter. Bixby Voice er ment å være bare en del av historien, som fungerer sømløst med kameraet og berøringsskjermen, slik at brukeren kan samhandle med telefonen mer naturlig.

"Hvis du ser filmen Iron Man, sitter Tony Stark der og samhandler med Jarvis, agenten eller assistenten, og han bruker alle tilgjengelige midler til ham," forklarte Rhee for oss. Han bruker tastaturet, og han snakker med ham, bruker hendene hans, spinner og hva han føler seg komfortabel med på det tidspunktet og i den sammenheng og objektet han faktisk manipulerer.

En imponerende demonstrasjon

Årsaken til dette trekket er delvis kompleksiteten til smarttelefoner. Dagene til en enkelt meny som hjelper deg med å ringe, tekst eller spille Snake er borte - brukergrensesnittdesignere må nå forsøke å finne en måte å gjøre det enkelt å utføre titusenvis av oppgaver.

“Dette problemet er ikke bare for smarttelefoner,” sier Rhee. “Det er også alle apparater og apparater vi lager: kjøleskap, TV, vaskemaskin, klimaanlegg og til og med robot støvsugere - det er så mange ting denne støvsugeren kan gjøre hvis du ser på fjernkontrollen og du er som, “Hva å gjøre?”

Det er ideen til Bixby Voice - etterligne ideen om å overføre telefonen til en person ved siden av deg og be dem om å gjøre de tingene du ikke vil stikke i telefonen, prøver å gjøre.

Bixby kan våknes med en knapp eller en talekommando

Hvis du har matlaging, kan Bixby rulle opp og ned for deg, spille musikk, stopp skjermen fra å tømme ut og søke på nettet uten å trenge en enkelt berøring.

Rhee er begeistret for dette, og demonstrerer flere scenarier for å vise hvor godt Bixby kan forstå ting logisk og sortere dem for deg. Det spenner fra å ta et bilde og legge det på Facebook med en enkelt kommando for å be telefonen om å endre sitt språk.

(Det er en sterk ironi med sistnevnte kommando, gitt Bixby kan bare forstå koreansk og amerikansk engelsk).

Det imponerende er ikke at en telefon kan gjenkjenne stemme - (annet håndsett kan gjøre hva Bixby kan til tross for at det er imponerende) - men at det kan gjøre det mer kontekstuelt enn andre.

I demonstrasjonene var det feilord, selv om resultatet fortsatt var korrekt som programvaren brukte kontekst til situasjonen. Ikke bare det, det vil lære dine intensjoner over tid - hvis du er i en app som du forandrer språket til mye, vet det ikke om du vil endre språket til selve telefonen.

Hodet i skyene

Rhees visjon for Bixby kan være forutsigbart fet (“Det vil være de facto grensesnitt for alt. Hver enhet vi produserer, produserer alle enheter andre. Det er visjonen vi ser”) Imidlertid vil de neste månedene være det bevisende grunnlaget.

Prosjektlederen hevder at selskapet selv har stor interesse for å absorbere Bixby i andre merkevares teknologi.

"Vi blir kontaktet av mange forskjellige OEMer," bekrefter Rhee til oss. "Ikke bare smarttelefoner, men vi snakker om bilprodusenter, og andre som lyd beslutningstakere kommer til oss også."

Han er ikke veldig bekymret for det akkurat nå, og foretrekker mer å fokusere på Samsungs utvalg av enheter, fra smarttelefoner til tabletter til TV-er på hvitevarer - alt som trengs, er en mikrofon og en Internett-tilkobling, og alt kan være Bixby-aktivert, og rekkevidden av Samsung-produkter på markedet er ganske stort allerede.

Det ligger i spørsmålet: Bixby er skybasert. Hvis du vil gjøre noe på smarttelefonen din via assistenten, trenger du en Internett-tilkobling, og hvis det mislykkes når du bruker stemme, blir du igjen ser dum ut.

"ALDRIG, SENDER jeg EN TWEET"

En av de viktigste problemene folk har med stemmekontroll av sine enheter for øyeblikket er at når de feiler, føler de seg idiotiske for å prøve noe nytt i utgangspunktet - så det må virkelig være feilfritt første gang å skape det riktige inntrykket.

Rhee er enig. “[Dette] friksjonspunktet er hvorfor i dag bruker folk ikke [taleassistenter]. Hvis de må nekke hvilken funksjon som virker og hvilken funksjon som ikke virker, så kommer den ikke til å fungere.”

Han peker på det faktum at Bixby lærer over tid som en grunn til å føle at Samsungs stemmeassistent tilbyr noe nytt, noe som negerer dumheten. Men når Rhee forklarer hvordan Samsung tenker på å forbedre Bixby, høres det ut som en farlig plan:

“Jeg ser på Bixby som som ti år gammel, og dens evne til å forstå oss. Jeg anser brukerne våre som Bixby foreldre, de prøver å vokse sin baby, det er ikke som om [Bixby] gjør noen feil, de kommer ikke til å sparke dem ut på gata.”

Bortsett fra det er akkurat hvordan brukerne vil se det - Bixby Home and Vision var kraftige verktøy i teorien, men i praksis var deres brukstilstand begrenset og noen ganger irriterende, slik at brukerne raskt slått av.

Selv Siri, trenger en nåværende markedsføringskampanje med The Rock for å vise hva den kan gjøre, snarere enn å bare bli sett på som et sted å sette timere enkelt, så det viser at det er et reelt behov for å markere for brukerne hvor god en personlig stemmeassistent kan faktisk være.

Så hvorfor starte Bixby så tidlig uten stemmenes anerkjennelse, da det kunne vente til kunngjøringen av notat 8 og hadde tjenesten helt klar til å gå, komme inn i markedet på en flamme av imponerende talegjenkjenning at andre tjenester ikke kan få til?

“Jeg liker drama, så ... ” Rhee sier, ler. “Da vi annonserte Bixby, brukte vi først 10 applikasjoner, og vi fikk mye tilbakemelding som sier at det ikke er nok for folk å bruke.”

Bixby Home - det trenger mer relevant informasjon

Men det er fortsatt bare noen få apps støttet av tjenesten, slik at du ikke kan be om å søke etter en film på Netflix og begynne å spille den - det vil trenge mer fingerbasert moro å oppnå.

Rhee sier at slike ting kommer, og det er en del av årsaken til forsinkelsen med tjenesten, da tilbakemeldingen fra forbrukerne var tydelig at de ønsket flere apper - så ble tegnebrettet revidert.

Det som skjedde var støtte for ting som YouTube, ringe inn i funksjonene som vanligvis er utformet for tilgjengelighet for funksjonshemmede, ved hjelp av dem for å fjerne behovet for å berøre skjermen. Faktisk har Samsung funnet ut at den kan kontrollere de fleste elementene i Android-økosystemet på denne måten, noe som gir den en sterk evne til å kontrollere operativsystemet gjennom stemme.

Samsung skal gjøre for mye arbeid for å overbevise markedet om at systemet er det beste der ute - det kjøpte Viv i fjor for å bidra til å lage et programvareutviklerpakke som kan brukes til å integrere Bixby og oppfordre utviklere til å bruke det gjennom hele sitt eget rammeverk, og oppfordrer utviklere til å hjelpe ut, kommer til å være avgjørende.

En lang vei å gå

Her er det større spørsmålet: hvor bra er Bixby sammenlignet med sine rivaler? Samsung er fokusert på å bevise at det er bedre enn Apple for øyeblikket i et bud på å klage markedsandel bort fra sin store konkurrent, og det var fokus for en annen demo.

Rhee sier at selskapet bare har jobbet på Bixby de siste par årene, men har vondt til å vise demonstrasjoner der den kan overgå Siri.

“[Bixby] er et helt annet konsept. S-Voice prøvde å kopiere det Siri hadde prøvd å gjøre,” han sier. “Det er noen komponenter som vi brukte [i Bixby] som evnen til å forstå tale og alle de tingene vi kan gjøre bruk av, men når det gjelder all den naturlige språkforståelsen, handlingsplanlegging, integrasjoner med alle de forskjellige applikasjonene, er det helt ny.”

I demonstrasjonen ved siden av hverandre er forskjellene subtile - spør telefonen om å ta en selvtillit på begge, vil se frontkameraet åpnet, selv om bare Samsung-telefonen faktisk vil ta taket.

Du kan imidlertid hevde at noen mennesker bare vil at kameraet bor på dette tidspunktet, slik at de kan komponere et skudd. Når du ber begge telefonene om å åpne det siste bildet tatt, gjør Bixby akkurat det der iPhone gjennomfører et tilfeldig søkeordbasert søk gjennom håndsettet.

Bixby Vision trenger fortsatt mye arbeid

Mens Rhee gjør en stor avtale om å kunne si "legge inn dette bildet til Facebook" eller andre sosiale nettverk - er jeg ikke overbevist om at folk vil ha det nivået av autonomi gitt til en telefon for sitt sosiale nettverk.

Og la oss ikke komme foran oss selv her. Selv om det er tydelig en stor mengde arbeid gått inn i etableringen av Bixby (med Rhee forteller meg at 3000 personer jobbet på prosjektet) og demonstrasjonene er imponerende, er de fremdeles bare pre-rehearsed demos.

Klart demonstrasjonen jeg så, var ganske mye perfekt, med de eneste feilene som ikke hadde de riktige appene som ble installert i demo-telefonene på showet - det er ikke mulig å legge ting til Facebook hvis du ikke er logget inn, forståelig.

For alle Samsungs avslappede cockiness om Bixby, er det en tjeneste som fortsatt er langt fra feilfri. Bixby Vision er fortsatt i ferd med å bruke kameraet og har svært begrenset funksjonalitet - dets bildegjenkjenning kan sjelden utdanne hva det ble vist ved lansering.

Dette ønske om å sette et uferdig produkt på markedet er et bevis på at Samsung trengte en spiller i det digitale assistentspillet, og til tross for at han var imponert over Bixby-demonstrasjonen, kan jeg ikke riste en stor bølge av skepsis som virvler fordi Samsung tok så lang tid bli involvert.

Amazonas Alexa har en enorm headstart - ikke bare i teknologi, der den brukes av merker som Ford, HTC og Huawei - men også når det gjelder brukeroppfattelse. Ideen om å spørre Alexa om å gjøre ting er ikke lenger fremmed for den gjennomsnittlige brukeren, og det er en massiv velsignelse.

En av de tingene som imponerte meg mest om Bixby, var den store mengden kommandoer du kunne si til det, og alle av dem virket veldig naturlige, ikke-robotte setninger.

En ikonisk logo i vente?

Samtidig har vi ikke sett hvordan listen ser ut til Googles assistent eller Apples Siri, og med Pixel 2 og iPhone 8 kommer ut, kan det bli enda mer imponerende. Ingen av selskapene vil stå stille, og begge jobber hardt for å tilby mer naturlig språklig kontekst.

Apple og Google går også med i Amazon med å ha dedikert maskinvare til å snakke med, .

Om Samsung kan lykkes med egen assistent, avhenger av hvor godt det kan rulle ut tjenesten.

"[Bixby] er et godt utgangspunkt. Og som sagt, vi er nye til ...," sier Rhee og fanger seg før han starter sin setning. “Vi er de første til spillet, og jeg tror de andre, du vet helt sikkert Siri, vil gjøre mye innhøsting.”

Han hevder at Google ikke klarer det samme Samsung er fordi “de har ikke tilgang til det lavere nivået av ting som en produsent av utstyr har for øyeblikket” - men i virkeligheten er det akkurat hva merket gjør med Pixel-serien, og muligens forklarer hvorfor det nye settet av telefoner ble opprettet av Google i utgangspunktet.

Hvis Galaxy Note 8 og forbedret Galaxy S8 duo viser en reell oppbevaring i bruk, og brukerne begynner å virkelig komme om bord med hva Bixby kan gjøre, har Samsung trukket et mesterslag i å gjøre seg selv relevant i et assisterende spill som det så ut til å ha savnet båten på.

Kanskje er det ikke noe som skjer med Samsung. Kanskje det ser Bixby som et langsiktig spill, og det er villig til å fortsette å investere i det til det fungerer, som en del av en bredere visjon som driver alle sine enheter.

Tingen er, tiden tikker - Alexa løper vekk som de facto talekontroll på enheter, og Apple investerer tungt i både kraften og omdømmet til Siri og Google Assistant som tegner på store datamengder for å fortsette å forbedre.

Samsung trenger å forbedre Bixby - raskt - for å sikre at kundene fortsetter å bruke det regelmessig, for å gi de nødvendige dataene for å gjøre stemmeinnkjenningen mer nøyaktig, bildet søker mer nyttig, og hele opplevelsen er en integrert del av hverdagen, og støtter alle store apper du trenger - ellers kan dette ende opp med å bli et kostbart prosjekt som forbinder S Voice stille på sokkelen.

  • Alt du trenger å vite om Bixby Voice