Apple beäugt den KI-Vorstoß beim Vision Pro. Was es braucht, ist ein Gesundheitsdrehmoment
Apples Ambitionen in der immersiven Welt der erweiterten und virtuellen Realität (AR und VR) haben einen schwierigen Anfang. Dem 3.500 US-Dollar teuren Vision Pro gelang es nicht, einen Marktsturm auszulösen. Dann kamen Berichte darüber, dass Apple sein AR-Smart-Brillen-Projekt abgebrochen hat.
Das Unternehmen ist jedoch noch nicht fertig. Laut Bloomberg bringt Apple seine Suite von KI-Tools namens Apple Intelligence auf die visionOS-Plattform. Das bedeutet, dass KI-Tricks wie Writing Tools, Genmoji und Image Playground auf das Headset kommen.
Das sind keine wirklich aufregenden Upgrades für den Vision Pro, insbesondere angesichts seines hohen Preises und der Art von fortschrittlichem Technologie-Stack, den er zu bieten hat. Schließlich kaufen Sie kein AR/VR-Headset für 3.500 US-Dollar, um die Grammatik zu korrigieren oder KI-generierte Aufkleber zu erstellen.
Stattdessen sollte sich Apple auf das Gesundheitswesen und den medizinischen Wissenschaftsbereich konzentrieren. Das ist eine Nische, in der es mehr ernsthafte Käufer für ein Gerät wie das Vision Pro gibt als einen durchschnittlichen Käufer, der sich für AR- oder VR-Headsets für Freizeitaufgaben wie Gaming oder das Ansehen von immersiven Videos interessiert.
Es ist bereit zum Mitnehmen
Im Bereich der medizinischen Wissenschaft sind Fortschritte in den Bereichen AR und VR kein Unbekannter, insbesondere ihr großes Potenzial für die täglichen Aktivitäten eines Wissenschaftlers oder medizinischen Fachpersonals. Das sagen Experten der Stanford University zum Potenzial der AR/V-Technologie:
„Zukünftig können Patienten während eines Teils von Telemedizinbesuchen VR- und AR-Displays tragen, um Vitalfunktionen und andere Gesundheitsmetriken für den Arzt zu messen und dann mit Zustimmung des Patienten automatisch Daten zur elektronischen Gesundheitsakte hinzuzufügen.“
Sie erwähnen auch, wie Rettungssanitäter (EMT) eine medizinische Situation beurteilen und passende Anweisungen erhalten können, wenn sie den Zustand des Patienten sehen und über ein Headset oder eine Datenbrille direkt an einen erfahrenen Arzt weiterleiten.
Beispielsweise kombiniert der NARA (Nakamir Augmented Reality Assistant) KI und AR auf einer Microsoft HoloLens 2, um Arbeitnehmer in verschiedenen Bereichen, einschließlich des Gesundheitswesens, zu unterstützen. In einem anderen bewährten Szenario kann ein Mixed-Reality-Headset oder eine AR-Brille verwendet werden, um eine Person über lebensrettende Notfallmaßnahmen zu informieren.
Experten schlagen außerdem vor, dass solche Hardware in den Kits für automatische externe Defibrillatoren (AED) enthalten sein sollte, damit in Notfallsituationen Anweisungen zur Verwendung und andere Protokolle umfassender bereitgestellt werden können.
Die Leute bei Heru nutzen Headsets, um Optometrie-Dienste anzubieten, wie zum Beispiel die Durchführung von Sehtests zu Hause. Der Test wird zu Hause durchgeführt und die relevanten Daten an die Gesundheitsexperten übermittelt, die anschließend auf der Grundlage der Ergebnisse Pläne für die weitere Unterstützung ausarbeiten können.
Es gibt jede Menge Präzedenzfälle
Im Bereich der psychischen Gesundheit und des Wohlbefindens kann VR-Ausrüstung auch dabei helfen, „Achtsamkeit zur Stressreduzierung bei PTSD zu entwickeln, die Aufmerksamkeit bei ADHS zu lenken, die Fähigkeiten zu stärken, die in der kognitiven Verhaltenstherapie vermittelt werden, oder Gedächtnis- und kognitives Training bei neurodegenerativen Erkrankungen.“
Eine vom Strategic Initiatives Lab des US-Veteranenministeriums durchgeführte Pilotstudie ergab , dass VR-gesteuerte Erfahrungen dazu beitragen können, Einsamkeit zu lindern, Angstzustände zu lindern und Schmerzen und Stress sowie andere damit verbundene psychische Gesundheitsprobleme bei Veteranen zu lindern. Die Regierungsbehörde bietet außerdem einen ausführlichen Einführungsleitfaden zu Immersive Technology-Materialien ( PDF ) an, um Veteranen die richtige XR-gestützte Versorgung zu bieten.
Die Professoren Kim Bullock und Jeremy Bailenson von der Stanford University haben kürzlich detailliert beschrieben, wie Virtual-Reality-gestützte Physiotherapie und spiegelvisuelles Feedback (MVF) Kindern mit Zerebralparese helfen können, einer neurologischen Störung, die die Körperbewegung und -haltung erheblich beeinträchtigt.
Ihre Ergebnisse wurden im American Journal of Psychiatry and Neuroscience veröffentlicht. Ein Unternehmen namens XRHealth bietet Patienten ein breites Spektrum an Schmerzbehandlung, kognitivem Training, Neurorehabilitation und Achtsamkeitspflege an, bereitgestellt über VR-Headsets und von der FDA registrierte therapeutische Apps.
Die Leute an der NYU Langone Health setzen AR- und VR-Technologie ein, um immersive 3D-Anatomiemodule zu erstellen, die Medizinstudenten ein fotorealistisches Erlebnis bieten und es ihnen ermöglichen, anatomische Strukturen im Detail zu erlernen.
Forscher der Miami Miller School of Medicine haben kürzlich getestet, wie VR-Headsets den erheblichen Stress während der Schwangerschaft, der Geburt und nach der Geburt lindern können.
Apple hat den Stack bereit
Die Einsatzmöglichkeiten des Vision Pro im Gesundheitswesen sind endlos, da der Bereich immer weiter wächst und die Forschung an Fahrt gewinnt. Experten schlagen vor, dass Sensoren, beispielsweise zur Messung der Elektroenzephalographie (EEG), in XR-Hardware integriert werden können, um die Versorgung von Alzheimer-Patienten zu erleichtern.
Apple stellt bereits eine breite Palette von Geräten her, die mit Biosensoren ausgestattet sind, die eine Vielzahl von Biomarkern aufzeichnen können. Sie können für Ärzte eine große Hilfe bei der Beurteilung der Krankengeschichte eines Patienten sein, beispielsweise der Herzfrequenzaktivität und des Schlafverhaltens. Die Apple Watch kann beispielsweise die Sauerstoffsättigung messen, unregelmäßigen Herzfrequenzrhythmus erkennen , Temperaturabweichungen erkennen und vieles mehr.
Die Beats PowerBeats Pro 2 Ohrhörer können die Herzfrequenz messen. Alle diese Biosensordaten sind mit der Apple Health-Plattform verknüpft, die auf einer Vielzahl von Geräten verfügbar ist. Für Apple wird es kein Problem sein, den Vision Pro tiefer in dieses Ökosystem einzubinden.
„Die vielen Möglichkeiten für den Einsatz von VR-Headsets und AR-Brillen in der Gesundheitsversorgung zu Hause liefern gute Gründe für die Entwicklung von HMDs zur Messung von Biosignalen, zur Bereitstellung sicherer Telemedizin-Videostreaming und zur Bereitstellung immersiver Therapien“, schreibt Angela McIntyre, Geschäftsführerin der Stanford Wearable Electronics (eWEAR) Initiative an der Stanford University.
Ja, es bestehen Cybersicherheits- und Datenschutzrisiken. Aber wenn es ein Unternehmen gibt, das beim Schutz der Privatsphäre der Benutzer im technischen Bereich akzeptable Arbeit geleistet hat, dann ist es Apple. Darüber hinaus betritt das Unternehmen kein Neuland, wenn es Vision Pro als gesundheitsorientiertes Produkt vorantreibt.
Die US-amerikanische Food and Drug Administration (FDA) hat einer breiten Palette von AR/VR-Geräten im medizinischen Bereich bereits einen De-Novo-Antrag oder eine Vormarktzulassung – über eine 510(k)-Freigabe – erteilt. Bis September 2024 hatte die Behörde 69 medizinische Geräte zugelassen , die für Diagnose-, Behandlungs-, Telemedizin-, virtuelle Pflege- und Therapiezwecke auf AR- und VR-Technologie basieren.
Auf der anderen Seite arbeitet Apple bereits mit einem breiten Pool an wissenschaftlichen Experten und Bildungseinrichtungen zusammen. Für seine neueste Gesundheitsstudie hat das Unternehmen Experten der Harvard Medical School hinzugezogen, um zu beurteilen, wie die von iPhones und tragbaren Geräten gesammelten Daten die wissenschaftliche Forschung vorantreiben können.
Der Vision Pro verfügt über die gesamte Rechenleistung und eine der fortschrittlichsten AR/VR-Anzeigetechnologien, die die Branche zu bieten hat. Alles, was es braucht, ist ein solider Vorstoß in einen Bereich, in dem sich die Vorteile von AR und VR bewährt haben und das von Experten umfassend angenommen wird.
Es wäre sinnvoll, wenn ein 3.500-Dollar-Headset einen solchen medizinischen Nutzen finden würde, anstatt dass Apple einen protzigen Traum von virtuellem Computing verkauft, der bereits mit einem Mac und einer weniger sperrigen XR-Brille zu einem viel geringeren Budget problemlos durchgeführt werden kann.