Apple Patents Gesture og Gaze Controls for Devices

Et nyt Apple-patent offentliggjort tirsdag tyder på, at virksomheden udvikler tv'er og Mac-skærme, som du kan styre med dine øjne. Hvis blikstyring ikke passer til din fancy, kan du bare gestikulere. Musen, tastaturet og endda berøringsskærmen bliver for det meste irrelevant.

IPhone 7 Plus har to kameraobjektiver, som, selvom det ikke er angivet under præsentationen, muliggør 3D-dybdekortlægning. Google har arbejdet på denne teknologi med Project Tango, så det giver mening for Apple at konkurrere. Mens alle er hyped over headsettet forstærket virkelighed, og Apple CEO Tim Cook har antydet en eller to gange, at selskabet har A.R. planer, der er en anden form for forstørret virkelighed på blokken - og det er en, der ikke kræver krævende, bærbar teknologi.

Det er næsten som det er telekinetiske teknologi, som i sig selv forstærker (eller forbedrer) virkeligheden, slør linjerne mellem teknologi og den virkelige verden. Patentet opsummerer den aktuelle situation: "Ved brug af fysiske taktile input-enheder som knapper, ruller eller berøringsskærme indgår en bruger typisk og afbryder kontrollen af ​​en brugergrænseflade ved at berøre og / eller manipulere den fysiske enhed." Men med dette Opfindelsen kan brugeren fjerne musen eller styrefladen, tastaturet og berøringsskærmen og i stedet blot gesture eller blikke for at styre computeren.

To eller flere kameraer, når de arbejder sammen, kan efterligne menneskelige øjne og kan derfor udgive et 3D-billede. Softwaren ved derefter, hvor brugeren er, hvad hans eller hendes skelet ser ud, og kan reagere i overensstemmelse hermed.

Udførelsesformer ifølge den foreliggende opfindelse beskriver pegebesigelser til indgribende interaktive emner præsenteret på en skærm koblet til en computer, der udfører en brugergrænseflade med blandet modalitet, der indbefatter tredimensionel (3D) detektion ved hjælp af en 3D sensor til bevægelse eller ændring af position af en eller flere kropsdele, typisk en hånd eller en finger, af brugeren.

Patentet beskriver forskellige bevægelser, som Point-Select, Point-Touch og Point-Hold, som giver brugerne mulighed for at styre grænseflader på et tv eller en computerskærm.

For eksempel kan brugeren horisontalt rulle en liste over interaktive elementer (fx film), der præsenteres på displayet, ved at manipulere en vandret rullefelt via punkt-berøringsbevægelsen. Punkt-hold gestus giver brugeren mulighed for at se kontekstoplysninger for et interaktivt element, der vises på displayet. For eksempel kan computeren præsentere et popup-vindue, der indeholder oplysninger som en oversigt over plot, en anmeldelse og cast medlemmer som svar på brugeren, der udfører en Point-Hold-gestus på et ikon, der repræsenterer en film.

I henhold til dette patent kan systemet også registrere en brugers blik, så det kan reagere på rettede øjenbevægelser. Her er det i Apples egne ord:

… præsentere ved hjælp af et edb-system flere interaktive emner på en skærm koblet til computeren, der modtager fra en føleindretning koblet til computeren en indgang, der repræsenterer en blikretning for en bruger, identificering af et målpunkt på displayet baseret på blikretning, associering af målpunktet med et første interaktivt element, der vises på displayet og responsivt til målpunktet, åbning af et eller flere andre interaktive elementer på displayet.

Igen, hvis gestikulationer ikke skar det for dig, blik-kontrol bare måske. Systemet registrerer, hvor brugeren ser ud og kan derfor afgøre, hvad brugeren ønsker at gøre, "hvorved behovet for en mus og / eller et tastatur undgås", siger patentet.

Noget lige så klogt som besværligt som at justere højttalernes lydstyrke vil blive en brise. Patentet beskriver både visuel og gestikulatorisk kontrol over højttalervolumen. Med ens øjne kunne brugeren se "på toppen af ​​en højttaler koblet til computeren", hvilket ville få computeren til at "hæve lydstyrken på højttaleren." (Hvis brugeren ser på bunden af ​​højttaleren, af Selvfølgelig vil lydstyrken falde.) Med bevægelser kan brugeren også styre højttalervolumen. Brugeren vil pege på den ene hånd ved højttaleren, og med sin anden hånd, gestus op eller ned. "På samme måde, hvis brugeren udfører en Point-Touch-gestus i nedadgående retning, mens den peger mod højttaleren, kan computeren sænke lydstyrkeniveauet for højttaleren," patenttilstandene.

Det er en anden form for forstørret virkelighed, og en der måske begynder at lave bølger hurtigere end sige de mystiske Magic Leap-headset. Leap Motion, et andet selskab i det virtuelle reality-spil, har selv været perfekt for håndsporingsteknologi. Men en Apple foray i feltet kunne ændre spillet, især hvis det kombineres med øjensporingskapacitet.

Bare vær sikker på at du ikke begynder at spekulere på, hvad der sker med privatlivets fred, når al denne teknologi bliver mainstream. Heldigvis har Cook og Apple trukket sig for at opretholde et godt ry.