Wie ein Unternehmen Ihrer Wear OS-Smartwatch Superkräfte verleiht

„Hier geht es darum, den nächsten Touchscreen zu bauen“, sagte Ohto Pentikäinen, CEO eines Unternehmens namens Doublepoint , als er Digital Trends sein faszinierendes Gestensteuerungssystem der nächsten Generation vorstellte. Man kann es sich am besten als Apples Double-Tap-Funktion für Steroide vorstellen.

Ich habe während der CES 2024 per Videoanruf mit Pentikäinen gesprochen, um mehr zu erfahren.

Mehr als eine App

Möglicherweise haben Sie die von Doublepoint für Wear OS eingeführte App „Wow Mouse“ bereits auf der CES 2024 gesehen, aber das ist erst der Anfang dessen, woran das Unternehmen arbeitet. Wow Mouse erweitert Ihre Wear OS-Smartwatch um Gestensteuerung und verwandelt sie effektiv in eine Maus am Handgelenk, die zur Bedienung Finger- und Handgelenksbewegungen nutzt. Aber Wow Mouse ist eine relativ einfache Demonstration dessen, woran Doublepoint arbeitet.

„Wir bieten etwas viel umfassenderes“, sagte Pentikäinen auf die Frage nach der Wow Mouse-App, „und wir können viel mehr tun als nur einen einzigen Tastendruck.“ Das Größte, wozu unsere aktuelle Hardware in der Lage ist, ist das Drücken und Halten, was bedeutet, dass man tatsächlich scrollen und Objekte manipulieren kann.“

Doublepoint nennt diese „Mikrogesten“ und sie umfassen alles von Tippen zum Auswählen, Tippen zum Scrollen und Doppeltippen. Zusätzliche Gesten zu haben, die überdie Double-Pinch-Geste von Double Tap hinausgehen, ist sehr ansprechend und bringt auf den Punkt, warum Pentikäinen die Technologie mit einem Touchscreen verglichen hat, da sie viele der gleichen Gesten nachahmt, die wir bereits auf ihnen verwenden.

Wie funktioniert also das System von Doublepoint?

Wie diese Gesten funktionieren

„Die Funktionsweise der Mikrogestenerkennung unterscheidet sich von der computergestützten Handverfolgung“, erklärte Pentikäinen anhand eines bekannten Vergleichs. „Dabei berechnet die Kamera die Haltung Ihrer Hand, und zwar jede Millisekunde oder unabhängig von der Bildrate, wenn Ihre Finger einander berühren. Die Art und Weise, wie wir Berührungen erkennen, nutzt die Inertial Measurement Unit.“

Die Inertial Measurement Unit (IMU) klingt wie eine spezielle Hardware, tatsächlich besteht sie jedoch lediglich aus einem Beschleunigungsmesser, einem Gyroskop und einem Magnetometer. Also Kernsensoren, die in fast allen Smartwatches und anderen Wearables zu finden sind.

„Es sucht nach einer Vibration, die entsteht, wenn sich Ihre Finger berühren“, sagte Pentikäinen. An diesem Punkt unterscheiden die Algorithmen von Doublepoint diese Vibration dann von allen anderen Vibrationen, die auftreten, wenn Sie Ihre Finger bewegen. Allerdings ist die innovative Pinch-and-Hold-Geste, die sehr ungewöhnlich und für die Attraktivität des Algorithmus entscheidend ist, etwas anders und weitaus komplizierter.

„Zum Kneifen und Halten müssen wir auch wissen, wann die Finger zusammengehalten werden, und dafür nutzen wir tatsächlich die Sehnenüberwachung. Wir verwenden den optischen Herzfrequenzsensor nicht, um Muskeln zu betrachten, sondern die Sehnen, die Ihren Finger mit dem Muskel verbinden , und es ist die Bewegung, die uns sagt, wann Sie aufhören zu berühren“, sagte er.

Konfiguration und Genauigkeit

Ein Teil des Erfolgs von Apples Double Tap besteht darin, dass es ohne Einrichtung oder Konfiguration funktioniert und zudem äußerst genau ist. Was ist mit dem System von Doublepoint?

„Wir wollten es von Anfang an zu einem unserer Verkaufsargumente machen, dass wir keine Konfiguration benötigen und es sofort funktioniert, wenn man es installiert. Das bedeutet, dass wir über einen Prozess verfügen müssen, um Daten von einer Vielzahl von Menschen zu sammeln und relevante Faktoren wie Body-Mass-Index (BMI), Alter und Melatoninspiegel zu berücksichtigen. Wir konnten sehr, sehr gute Genauigkeitswerte erreichen. Fast im Bereich von 97 % bis 98 %. Natürlich gibt es noch viel zu tun“, sagte er.

Interessant ist auch, dass eine Smartwatch mit Doublepoints Gestenerkennung mit anderen Bluetooth-Geräten, beispielsweise solchen mit Eye-Tracking, gekoppelt werden kann, sodass diese zusammenarbeiten. Es macht die Steuerung solcher Systeme natürlicher und auch privater, da keine Spracherkennung als Backup oder Alternative erforderlich ist.

Qualcomm ist interessiert

Gestensteuerungen sind nichts Neues , aber es besteht kein Zweifel daran, dass Apples Double Tap-System in letzter Zeit das Interesse daran wiederbelebt hat. Und es wird wahrscheinlich erst mehr Aufmerksamkeit erhalten, wenn das Vision Pro-Headset auf den Markt kommt, da andere Konkurrenzsysteme möglicherweise neue und andere Dinge ausprobieren, um die Steuerung von Headsets einfacher und intuitiver zu gestalten. Daher ist es wahrscheinlich keine Überraschung, dass Qualcomm an der Technologie von Doublepoint interessiert ist.

„Wir haben eine Lieferantenvereinbarung mit Qualcomm“, verriet Pentikäinen. „Das bedeutet, dass die Idee darin besteht, unsere Algorithmen in Qualcomm-Chips einzubetten, und sie stellen diese Chips heute natürlich vielen verschiedenen Anbietern von Uhren und Fitness-Trackern zur Verfügung.“

Neben Qualcomm arbeitet das Unternehmen auch mit Sensorunternehmen zusammen, um seinen Algorithmus in den Sensor selbst einzubetten. Dann gibt es noch die firmeneigene Referenz-Smartwatch-Plattform, die laut Pentikäinen „den Menschen eine Vorstellung davon geben soll, was wir mit [den Algorithmen] machen können, und zeigen, wie wir sie in ein Produkt integrieren würden.“

Demnächst?

Bedeutet das, dass bald eine neue Smartwatch mit Gesten- und Pinch-and-Hold-Technologie von Doublepoint erhältlich ist, mit der Sie scrollen, wischen und Werte wie Lautstärke oder Helligkeit ändern können?

„Wir haben keine bestätigten Zeitpläne, wann unsere Partner ihre Produkte auf den Markt bringen können, aber ich würde sagen, dass sich diese Dinge derzeit sehr schnell weiterentwickeln“, sagte Pentikäinen.

Während unseres kurzen Gesprächs zog Pentikäinen mehrmals Vergleiche zwischen dem Gestensteuerungssystem von Doublepoint und dem Touchscreen, und am Ende erklärten wir genauer, warum er sie gemacht hatte.

„Der Touchscreen entstand im Grunde genommen beim Telefon, und jetzt sehen wir ihn überall“, sagte er. „Es ermöglichte alle möglichen neuen Geräte. Apple hat letztes Jahr die Gestenerkennung verdoppelt und im Wesentlichen gezeigt, dass Gesten eine entscheidende Möglichkeit zur Verbesserung sein werden. Wir möchten dies einfach so vielen Unternehmen wie möglich ermöglichen, indem wir das nutzen, was unserer Meinung nach der nächste Touchscreen ist.“

Während wir auf die Ankunft einer Smartwatch mit Doublepoint-Technologie warten müssen, können Sie eine Basisversion über die Wow Mouse-App ausprobieren, die ab sofort für ausgewählte Wear OS-Smartwatches über Google Play zum Download bereit steht.