Ich habe mein Gesicht in einen Gamecontroller verwandelt, und das können Sie auch
Auf der Google I/O war KI während der gesamten Veranstaltung ein Thema, es wurde jedoch eine weitere bahnbrechende unterstützende Technologie angekündigt, die es Ihnen ermöglicht, einen Computer mit Ihrem Gesicht zu steuern, anstatt eine Maus zu verwenden. Googles Project GameFace verwandelt Ihr Gesicht buchstäblich in einen Gamecontroller. Wenn sich selbst die beste Maus oder der beste Trackball als schwierig oder unmöglich erweist, kann diese kostenlose App Ihr Computererlebnis erheblich verbessern.
Der Blogbeitrag von Google beschreibt, wie Project GameFace von der Notlage des Videospiel-Streamers Lance Carr inspiriert wurde, der an Muskeldystrophie leidet. Ein Brand führte zum Verlust von Carrs teurer Head-Tracking-Maus, die es ihm ermöglicht hatte, weiter zu spielen.
Google hat mit Carr zusammengearbeitet, um Project GameFace zu entwickeln, eine Lösung, die eine Standard-Webcam verwendet und auf jedem Windows-PC funktioniert. Sie können die App vom GitHub-Projekt oder -Fork herunterladen und sie an Ihre speziellen Bedürfnisse anpassen, wenn Sie Python kennen.
Ich habe es installiert und ausprobiert. Meine eingebaute Webcam funktionierte zur Zeigersteuerung, wurde aber durch ein nahegelegenes Fenster zu stark ausgeblendet, um meine Augenbrauen und meinen Mund gut erkennen zu können. Ich habe einen Insta360 Link angeschlossen, der über eine Face-Tracking-Technologie verfügt, mit der ich schwenken und neigen kann, während ich mich bewege. Die beiden Technologien fügten sich nahtlos zusammen und nach einiger Feinabstimmung funktionierte alles großartig.
Die Cursorgeschwindigkeit war viel zu schnell, daher habe ich die Standardeinstellung von 40 auf 15 vertikal und 20 horizontal gesenkt. Mit diesen Anpassungen konnte ich meinen Mauszeiger einfach durch Drehen und Neigen meines Kopfes an jeden beliebigen Punkt auf meinem Bildschirm bewegen. Das ist kein Eye-Tracking. Es scheint meiner Nase zu folgen.
Die App erkennt sechs Gesichtsgesten: Mund öffnen, Mund links und rechts, linke und rechte Augenbraue heben und rechte Augenbraue senken. Es ist unklar, warum die untere linke Augenbraue keine Option ist. Diese Gesteneinstellungen machen es in Kombination mit Kopfbewegungen zur Richtungssteuerung relativ einfach, Tasten und Mausklicks zu binden, sodass Sie ein Spiel spielen oder einen Computer nur mit Ihrem Gesicht steuern können.
Hier gibt es viel Raum für Verbesserungen. Idealerweise sollten Gruppen von Gestenbindungen und Cursorgeschwindigkeiten für jede App gespeichert werden, damit Sie nicht eine einzige Konfiguration finden müssen, die für alles funktioniert. Es wäre auch bequemer, nach der Anpassung der Cursorgeschwindigkeit einen Bestätigungsklick mit einem Countdown zum Zurücksetzen zu verlangen. Es dauerte ein paar Minuten, bis ich meinen wilden Mauszeiger bändigte, als ich die Gesichtsverfolgung zum ersten Mal einschaltete.
Insgesamt ist Project GameFace eine wunderbare Adaption, die vielen Menschen das Leben erheblich erleichtern dürfte, denen es sonst schwerfallen würde, sich am Computer zurechtzufinden oder ein Spiel zu spielen. Immer mehr Technologieunternehmen sollten die Gestensteuerung per Webcam nutzen.