het eBay-HeadGaze brengt hands-free input voor de iPhone X met ARKit

Vandaag, eBay bleek een handige nieuwe stuk van augmented reality software die gebruik maakt van zowel de front-facing iPhone X camera en Apple ‘ s ARKit kader. Door het volgen van hoofd bewegingen met behulp van de 3D-sensoren in de TrueDepth camera, die dezelfde hardware die het mogelijk maakt Apple ‘s Face ID unlock functie, eBay ontwikkelde een manier om te verzenden input commando’ s door gewoon het verplaatsen van uw hoofd.

Het systeem, dat eBay belt HeadGaze, lijkt te werken op dezelfde wijze eye tracking, maar het zou begrijpelijk zijn minder nauwkeurig dan die van een volledig uitgeruste eye-tracking kit. Gezien het primaire doel van het helpen van mensen bij het verkopen van producten online, het eBay-demo video laat zien hoe HeadGaze kan worden gebruikt om hands-free online winkelen, slechts een blik op bepaalde delen van het scherm van de iPhone kan de voortgang door middel van de checkout flow.

De technologie werd ontwikkeld door een team van eBay stagiaires geleid door Muratcan Cicek, een software-engineer en PhD-student die gebruik maakt van de assistentie-technologie als hulpmiddel voor zijn motor bijzondere handicap. In die zin, HeadGaze — en de winkel-app Cicek gemaakt, genaamd HeadSwipe — kan een zeer nuttig stuk van technologie voor mensen met een handicap die op zoek zijn naar een meer toegankelijke manier gebruik te maken van mobiele apparaten.

“Naast deze kop staren ervaring, zijn we nu aan het verkennen bent een ervaring die tracks van oogbewegingen,” Cicek schrijft in een blog post over HeadGaze. “De fusie van deze staren ervaringen open te stellen voor een bredere mogelijkheid op het definiëren van diverse hands-free gebaren, waardoor veel meer interessante toepassingen.” Gegeven het nut om mensen met een handicap, eBay heeft besloten om zowel HeadGaze en HeadSwipe als een open-source project op GitHub, zodat andere app-makers kunnen implementeren Cicek ‘ s technologie in hun eigen producten.