Apple treibt ein „Nachahmungsspiel“, das die Sinne täuscht

Das Feature des iPad Pro 2024, das mich am meisten interessiert, ist nicht der neue M4-Chip oder der neue OLED-Bildschirm, sondern eine winzige „chemische Reaktion“ zwischen dem Apple Pencil Pro und dem iPad Pro 2024: Wenn Sie mit dem Apple Pencil Pro zeichnen und schreiben Auf dem iPad Pro 2024 wird der Schatten des entsprechenden Pinsels auf dem Bildschirm angezeigt, um Benutzer darüber zu informieren, in welchem ​​Modus sich der Apple Pencil Pro gerade befindet.

Anschließend fand jemand 10 von Apple für diese Funktion entwickelte 3D-Modelle im PencilKit-Framework von Apple.

Und das Interessante ist, dass dieser Schatten keine einfache Textur ist. Er ändert sich entsprechend der Position des Apple Pencil Pro in der realen Welt, dem Abstand vom Bildschirm und dem Neigungswinkel. Kurz gesagt, er weist eine starke „Authentizität“ auf. , „Raumgefühl“ und „Interaktivität“.

Weitere Informationen zu diesem Apple Pencil Pro wurden ebenfalls enthüllt: Apple hat ihn mit einer neuen taktilen Feedback-Engine, einem neuen Drucksensor, einem Gyroskop und einem U2-Chip ausgestattet. Es hat das Potenzial, ein echtes Schreiberlebnis auf dem iPad Pro zu simulieren, und es hat auch das Potenzial, mit Vision Pro verknüpft zu werden.

Apples Nachahmerspiel

Apple ist das Unternehmen auf der Welt, das gerne reale Sinneserlebnisse durch Hardware simuliert.

Die auf dem MacBook 2015 installierte Taptic Engine erreicht erfolgreich „Fake and Real“ durch eine feine Simulation von Vibration und Berührung. Vielleicht wissen viele Menschen bis jetzt noch nicht, dass das Force Touch-Trackpad des MacBook selbst eine flache Oberfläche ist, die „nicht gedrückt werden kann“.

Unabhängig davon, ob es sich um 3D Touch oder das aktuelle nicht druckempfindliche Haptic Touch handelt, simuliert das iPhone durch genau das richtige Vibrations-Feedback durch dieses flache Glas ein magisches Gefühl des Zurückprallens Menschen können nicht widerstehen, mehrmals darauf zu drücken.

Die gleiche Technologie kommt auch im Home-Button des iPhone 7 und der drehbaren Krone der Apple Watch zum Einsatz, die beide ein taktiles Gefühl erreichen, das mechanischen Tasten und Zahnrädern sehr nahe kommt.

Neben der Verwendung von Taptic Engine zum „Täuschen“ der Finger der Benutzer erzeugen iOS 14- und AirPods-Geräte „räumliches Audio“, das Geräusche in verschiedenen Richtungen im 3D-Raum simuliert, und Head-Tracking-Technologie, um den Benutzern „ein Gefühl von“ zu vermitteln . Auf sozialen Plattformen gaben viele Nutzer an, dass sie nach dem Einschalten von räumlichem Audio dachten, auf ihren Telefonen würde draußen gespielt, wenn sie ihre Kopfhörer aufsetzten.

Vor der Veröffentlichung des Apple Pencil Pro sagten viele Quellen voraus, dass Apple diesen neuen Stift mit einer neuen Taptic Engine ausstatten würde, sodass Apple Pencil Pro und iPad auch ein realistisches Reibungsgefühl vermitteln können, das dem von Papier und Stift nahe kommt.

Das klingt ein wenig nach „Science-Fiction“, löst aber keineswegs Unvernunft aus, denn Apple ist ein Hersteller, der Vibrationsmotoren mag und gut damit spielt. Auch wenn der aktuelle Pencil noch keine relevanten Funktionen implementiert hat, ist er dennoch vielversprechend für die Zukunft.

Ein weiteres Unternehmen, das ebenfalls gerne Hardware einsetzt, um die Sinne der Benutzer zu täuschen, ist Nintendo.

Der Joy-Con-Griff des Nitendo Switch unterstützt die „HD-Vibrations“-Technologie. Spieler können den subtilen Unterschied zwischen „Eis in eine Tasse gießen“ und „Wasser in eine Tasse gießen“ unterscheiden, indem sie sich einfach auf unterschiedliche Vibrationsgefühle verlassen. In Kombination mit dem Switch Labo-Papieranzug können das Gyroskop und der Vibrationsmotor im Griff auch das echte Gefühl vermitteln, Fische aus dem Wasser zu fangen.

Ob Apples Vibrationsmagie oder Nintendos Labo-Kit und Controller: „Ein Stück Hardware“ wird verwendet, um „unzählige Möglichkeiten“ zu simulieren.

Beispielsweise simuliert die Taptic Engine auf dem iPhone 7 nicht nur den Home-Button und 3D Touch. Das Telefon vibriert wie ein „Kopfschütteln“, sondern auch verschiedene Rückmeldungen im System auf dieser riesigen internen Taptic Engine abgeschlossen.

Räumliches Audio ist ähnlich. Mithilfe von Gyroskopen und Beschleunigungsmessern können AirPods Max komplexe Geräusche mit einem räumlichen Orientierungssinn simulieren.

Wenn Nintendo den Spielern ein realistischeres Spielerlebnis bieten möchte, dann ist Apples „Nachahmungsspiel“ eine vollständige Palette von Simulationen, die Berührung, Hören und Sehen abdecken.

Daher ist die Projektion des Apple Pencil Pro keineswegs ein isoliertes kleines Easter Egg.

Vision Pro-Abschlussplan

Während des visionOS-Testprozesses im letzten Jahr stellten einige Entwickler fest, dass Vision Pro den Pinch-Vorgang der Finger nicht normal erkennen konnte, wenn der Benutzer den Apple Pencil hielt .“ Sichtbare Erkennung Der Apple Pencil ist wahrscheinlich bereits im Vision Pro vorhanden.

Durch das Hinzufügen von Hardware wie einer taktilen Feedback-Engine, einem neuen Drucksensor, einem Gyroskop und einem U2-Chip ähnelt es eher einem kleineren VR-Controller, und die Logik ist ziemlich ähnlich.

Zufälligerweise hat Logitech für Meta Quest 2 und 3 einen Stift für VR-Geräte, MX INK, auf den Markt gebracht.

Dieser Stift, der 10 Gramm schwerer als der Apple Pencil 2 ist, kann nicht nur wie ein herkömmlicher Stift flache Inhalte in einer Mixed-Reality-Umgebung erstellen, sondern unterstützt auch die Verfolgung mit sechs Freiheitsgraden, um frei im 3D-Raum zu erstellen Es gibt mehrere Tasten und die Stiftspitze ist auch druckempfindlich.

Braucht Vision Pro also einen Stift? Mit anderen Worten: Sind außer Augen und Fingern noch andere „Peripheriegeräte“ erforderlich?

Bevor wir über diese offene Frage sprechen, können wir einen Blick auf die Reihe populärwissenschaftlicher Videos werfen, die Apple auf der WWDC24 für Entwickler vorbereitet hat: etwa „Erstellen eines ansprechenden Weltraum-Foto- und Video-Nutzungserlebnisses“.

Darin werden viele konzeptionelle Dinge erwähnt. Apple unterteilt das stereoskopische Videoerlebnis in: 3D-Video, räumliches Video und immersives Apple-Video:

• 3D-Videos werden auf einer ebenen Fläche präsentiert und der Inhalt hat ein Gefühl von Tiefe, ähnlich den 3D-Filmen, die wir im Kino sehen.
• Räumliches Video hat nicht nur einen dreidimensionalen Sinn, sondern der Inhalt wird auch auf die tatsächliche Größe des Objekts skaliert und die Grenzen werden verwischt.
• Immersives Video umgibt den Benutzer vollständig. Der Benutzer sieht sich das Video nicht an, sondern taucht darin ein.

Unter ihnen kann „räumliches Video“ das Gefühl der Präsenz von Menschen in der realen Welt nachahmen und den Betrachtungswinkel innerhalb eines bestimmten Bereichs verändern; „immersives Video“ ist sogar noch extremer Benutzer des Videoteils.

Darüber hinaus hat Apple zusätzliche Anforderungen gestellt, beispielsweise müssen immersive Videos über interaktive 3D-Inhalte verfügen.

Das Konzept der „räumlichen Metadaten“ wird in dem populärwissenschaftlichen Video ebenfalls erwähnt, und es gibt auch eine Erklärung für „Projektion“: Projektion definiert die Beziehung zwischen Objekten in der Welt und Pixeln im Bild.

Das kleine Easter Egg im Apple Pencil Pro wird auch im populärwissenschaftlichen Video des Vision Pro-Entwicklers erklärt: Apple hat iPad Pro 2024 und Apple Pencil Pro nie als separate Geräte betrachtet, sie sind durch „Projektion“ verbunden.

Mit anderen Worten: Ein Apple Pencil kann künftig in der virtuellen Welt von Vision Pro in verschiedene Stifte unterschiedlicher Form „projiziert“ werden.

Da Vision Pro die Fragen zum Apple Pencil Pro klären kann, haben wir als Meister dieses „Nachahmungsspiels“ auch Grund zu der Annahme, dass sich das aktuelle Vision Pro noch im frühen Produktstadium befindet, und das kann es bereits Es ist zwar „gefälscht und echt“, aber in puncto Haptik reicht es natürlich nicht aus. Das liegt natürlich daran, dass Vision Pro nicht über speziell angepasste Peripheriegeräte verfügt Verlassen Sie sich darauf, dass Vision Pro uns umhauen wird, oder?

Nun sind wir fast sicher, dass der Apple Pencil Pro mit Vibrationsmotor, Gyroskop und U2-Chip auch mit dem Vision Pro in „andere Erscheinungsbilder“ projiziert werden kann, beispielsweise als Tintenstift Der Stift könnte wie die Controller anderer VR-Geräte verwendet werden und sich im Spiel Sabre Beat in ein Lichtschwert oder in der Harry-Potter-Reihe in einen Zauberstab verwandeln?

Wenn Sie etwas einfallsreicher sein können, bringt Apple vielleicht einen „Force-Feedback-Handschuh“ auf den Markt. Der gesamte Handschuh ist mit Vibrationsmotoren ausgestattet, und mit der Anpassung von Apple können Benutzer die von Vision Pro präsentierte virtuelle Welt wirklich „anfassen“.

Es ist fast sicher, dass Apple bereits über Möglichkeiten nachdenkt, Vision Pro um weitere „Interaktionen“ zu erweitern, denn Vision Pro ist noch nicht fertig und Apples „Nachahmungsspiel“, die Realität durch Virtualität zu ersetzen, ist noch lange nicht vorbei.

Die Bedeutung des „Realismus“

In früheren Artikeln haben wir die Bedeutung von Schlüsseln besprochen. Wenn es um Vision Pro geht, ein Szenario, das es Benutzern ermöglicht, „keine körperliche Leistung“ zu erleben, sind Interaktion und Feedback sogar noch wichtiger. Der Chefredakteur des Technologiemagazins „Wired“ sagte einmal:

Alle Geräte erfordern Interaktion. Wenn sich etwas nicht interaktiv anfühlt, gilt es als kaputt.

Das passte perfekt zu meiner ersten Erfahrung mit Vision Pro: Egal auf welche Weise oder wo ich versuchte, Gesten zu verwenden, ich konnte nicht auf die Schaltfläche klicken, auf die ich klicken wollte, und ich wusste nicht einmal, dass es ein Problem mit Vision Pro war. Oder es ist mein eigenes Problem.

Selbst wenn Apple also auf den 3,5-mm-Kopfhöreranschluss verzichten und die Akkukapazität reduzieren muss, muss dennoch Platz für eine riesige Taptic Engine geschaffen werden, die nicht nur die Lebensdauer der Komponente durch den Verzicht auf die mechanische Struktur verlängert, sondern auch die gewährleistet Realismus des interaktiven Feedbacks.

Das eigentliche Gefühl der Interaktion ist nicht nur ein Signal zur Rückmeldung, ob das Gerät kaputt ist. Wenn Sie tiefer gehen möchten: Wir sind vollständig von der „Tasten“-Ära zur „Touch“-Ära übergegangen und betreten auch die „Luft-“. Konditionierungsbetrieb"-Ära. In Zukunft müssen wir möglicherweise kein Gerät mehr berühren, um verschiedene Operationen auszuführen. Wir müssen nur in die Luft zeigen oder die Sprachsteuerung verwenden, um das zu tun, was wir wollen.

Diese verschwommene Zukunft zwischen virtueller und realer Welt wird uns alle Arten von Unsicherheit bescheren. Woher wissen Sie beispielsweise, dass Sie ein lebender Mensch sind und kein Gehirn in einem Bottich?

Vielleicht wird Apples „Nachahmungsspiel“ eines Tages mit Änderungen im Betrieb komplett enden, aber vorher können wir noch gespannt sein, wie Apple mit verschiedenen Methoden unsere Finger und unser Gehirn täuschen wird.

# Willkommen beim offiziellen öffentlichen WeChat-Konto von aifaner (WeChat-ID: ifanr). Weitere spannende Inhalte werden Ihnen so schnell wie möglich zur Verfügung gestellt.

Ai Faner |. Ursprünglicher Link · Kommentare anzeigen · Sina Weibo