Apple-patenter detaljer AR-kartlegging og hodesett med semi-gjennomsiktige skjermer

En utvidelse av Metaios patent som ble tildelt Apple etter oppkjøpet av selskapet i 2015, Apples nye patentsøknad som ble offentliggjort torsdag av US Patents and Trademark Office (USPTO), beskriver potensielle applikasjoner for utvidet virkelighet mens de illustrerer et ryktet hodemontert skjerm Apple skal etter sigende jobbe videre.

Med tittelen "Metode for å representere interessante steder i et syn på et reelt miljø på en mobil enhet og en mobil enhet derav", ville oppfinnelsen forbedret dagens todimensjonale kart ved å legge til utvidede virkelighetspunkter av interesse til blandingen.

Å forbedre brukerens virkelige verden ved å overlegge datamaskinbilder av nærliggende interessante steder på toppen av live kamera-innmating ville gjort for en fin ARKit-drevet kart-app. Dette kan enkelt oppnås ved å fusjonere data i høy oppløsning fra kamerasensoren med geolokasjonsinformasjon hentet fra GPS, kompass og andre ombord sensorer.

Bruke breddegrads-, lengdegrad- og høydesensordata kan tillate en iPhone eller iPad å finne ut av posisjon og retning i forhold til omgivelsene, slik at systemet kan legge over interaktive markører på de riktige stedene på toppen av det tatt bildet.

Som vi har sett med ARKits pålitelige og vanvittige nøyaktige sporing, kan POI-kommentarer nøyaktig følge brukerbevegelser, slik at de kan holde seg forankret til gjenstandene i den virkelige verden. Systemet ville til og med fungere hvis en bruker holdt enheten vinklet mot bakken ved å bruke et ballonggrensesnitt for å koble POIer til sine virkelige kolleger.

Og hvis en bruker vinkler enheten sin mot bakken utenfor en viss terskel, vil visningen bytte til en oversiktlig listevisning av interessante steder. Oppfinnelsen er spesielt nyttig når du bruker en hodemontert skjerm omfattende kameraet og skjermen.

Fra Apples patentbeskrivelse:

For eksempel er det hodemonterte displayet et video-gjennomsiktig hodemontert skjerm. Det er vanligvis ikke mulig for brukeren å berøre den hodemonterte skjermen på en måte som en berøringsskjerm.

Imidlertid kan kameraet som tar et bilde av det virkelige miljøet også brukes til å oppdage bildeposisjoner av brukerens finger i bildet. Bildeposisjonene til brukerens finger kan være ekvivalent med berøringspunkter berørt av brukerens finger på berøringsskjermen.

Faktisk nevner patentsøknaden begge tilnærminger: bare smarttelefon, utvidet virkelighet og en hybridløsning som ville gjengi AR-bilder på både telefonen og headsettet, med en iPhone som fungerer som interaktiv kontroller for scenen du ser gjennom headsettet.

"Den mobile enheten kan utføre en handling relatert til det minst ene interessante punktet hvis minst en del av det datagenererte virtuelle objektet som er blandet inn på den semi-gjennomsiktige skjermen er overlappet av en brukers finger eller enhet som holdes av brukeren," bemerker Apple.

Oppfinnelsen ble først innlevert i april 2017 og krediterer ingeniørene Anton Fedosov, Stefan Misslinger og Peter Meier som dens oppfinnere.