Die HeadGaze-Technologie von eBay reagiert auf Kopfbewegungen mit der TrueDepth-Kamera von Apple

eBay hat eine neue Open-Source-Technologie angekündigt, die es Menschen mit motorischen Einschränkungen erleichtern könnte, Apps zu kaufen oder sich darin zu bewegen. HeadGaze verwendet neben Apple ARKit die TrueDepth-Kamera von Apple, mit der Sie mithilfe Ihrer Kopfbewegung durch eine App navigieren können.

HeadGaze wurde im Rahmen eines Praktikumsprojekts bei eBay entwickelt und umfasst einen virtuellen Stift, der der Bewegung Ihres Kopfes (nach oben, unten, von einer Seite zur anderen) folgt, die 3D-Informationen des Kopfes aus ARKit entnimmt und die 3D-Geometrie-Zuordnung anwendet, um die Position von zu ermitteln der "Cursor" auf dem Bildschirm.

Von hier aus erfassen und reagieren Schnittstellen-Widgets auf die „Cursor“ -Interaktion. Ähnlich wie eine Maus den Cursor auf einem Desktop navigiert, können Sie mit dem Kopf auf eine beliebige Stelle auf dem Bildschirm zeigen und festgelegte Schaltflächen aktivieren.

Schau mal:

Muratcan Cicek, eBay Intern und Ph.D. Kandidat an der University of California, Santa Cruz, erklärt:

Mit HeadGaze können Sie auf Ihrem Telefon mit nur subtilen Kopfbewegungen scrollen und interagieren. Denken Sie an alle Möglichkeiten, wie dies zum Leben erweckt werden könnte. Sind Sie es leid, beim Kochen mit fettigen Fingern durch ein Rezept auf dem Bildschirm Ihres Telefons zu scrollen? Zu unordentlich, um die Anleitungen auf Ihrem Handy zu befolgen, während Sie mit dem Automotor unter der Motorhaube basteln? Es ist zu kalt, um die Handschuhe auszuziehen und das Telefon zu verwenden?

HeadGaze klingt nach einem aufregenden Projekt, und da es Open Source ist, kann jeder damit beginnen. Die Software ist über GitHub.com erhältlich. Noch besser ist, dass die Anzahl der Apple-Geräte mit einer TrueDepth-Kamera in den kommenden Tagen erheblich zunehmen wird. Es wird erwartet, dass TrueDepth und Face ID, die jetzt nur auf dem iPhone X verfügbar sind, auf drei neue iPhones und zwei neue iPad Pro-Tablets erweitert werden.

Weitere Informationen zu HeadGaze finden Sie unter diesem Link.