Denne nye Copilot-funksjonen skal endre måten du surfer nettet på

Microsoft kunngjorde et knippe betydelige oppdateringer til sin populære Copilot-løsning i oktober. En av disse nye funksjonene heter «Copilot Vision», og nå kan Microsoft opplyse at denne er tilgjengelig i en tidlig utgave.

Microsoft hevder at Vision-funksjonen er den aller første KI-funksjonen i sitt slag, og den skal ha potensial til å endre måten man bruker nettet og PC-en på. Den er, kanskje ikke uventet, kun tilgjengelig på Edge-nettleseren.

Et ekstra sett øyne

Copilot Vision fungerer, som navnet antyder, ved at den kan «se» det samme som brukeren ser på skjermen, snakke med brukeren i sanntid underveis og bidra med ulike former for hjelp, tips, assistanse og handlinger.

Microsoft beskriver det som å ha et ekstra sett av øyne mens man surfer.

I en eksempelvideo ser man hvordan funksjonen kan brukes til å planlegge en tur til et vitenskapsmuseum, hvor Vision kommer med forslag basert på hva som vises på skjermen og bistår brukeren med å navigere nettsidene på bakgrunn av verbal kommunikasjon om hva man ønsker å få med seg.

En annen eksempelvideo demonstrerer funksjonens nytteverdi innen nettshopping. Her oppgir brukeren simpelthen hva han/hun leter etter, i dette tilfellet en bestemt type klesplagg. Vision-funksjonen finner frem til en relevant nettbutikk og leter seg frem til konkrete forslag, basert på preferanser fra brukeren.

Vision-funksjonen holder seg fortløpende orientert om hva brukeren ser på skjermen, og kan svare på spørsmål i sanntid underveis.

Skal ivareta personvernet

Microsoft fikk som kjent mye pepper for sin såkalte Recall-funksjon, som fungerer ved å ta bilder av skjermen. Med den nye Vision-funksjonen, som ved første øyekast også kan se ut som et personvernmareritt, forsøker selskapet å komme kritikere i forkjøpet.

– For det første er Vision helt valgfritt, så du bestemmer selv når du vil aktivere det som ditt andre sett med øyne på nettet. I tillegg, når du avslutter en økt med Vision, slettes all data om det du sier og konteksten du deler med Copilot, skriver Microsoft og fortsetter:

– Hver gang du bruker Vision, behandles og beskyttes dataene dine i samsvar med Microsofts personvernerklæring. Kun Copilots svar logges for å forbedre sikkerhetssystemene våre.

Selskapet sier de akter å rulle funksjonen ut gradvis og «forsiktig», og i første omgang er det kun et begrenset antall Copilot Pro-brukere i USA som har tilgang til funksjonen gjennom Copilot Labs.

Den vil også kun fungere med et begrenset antall nettsider til å begynne med, men antallet skal øke drastisk etter hvert. Akkurat når nordmenn vil få glede av Vision-funksjonen, er uvisst, men som med andre Copilot-funksjoner er det trolig bare et spørsmål om tid.