Apple wird die Kamera des iPhones verwenden, um räumliches Audio zu personalisieren

Wenn Sie geblinzelt haben, haben Sie es vielleicht verpasst: Während der Keynote auf der WWDC 2022 konzentrierte sich Craig Federighi, Senior Vice President of Software Engineering von Apple, auf die neuen Funktionen, die wir in iOS 16 erwarten können. In seiner Präsentation erwähnte er kurz, dass Sie die True-Depth-Kamera eines iPhones verwenden können, um räumliches Audio zu personalisieren.

Was bedeutet das? Nun, einer der Schlüssel zur Bereitstellung eines immersiven, 3D-ähnlichen Effekts von räumlichen Audioinhalten mit Kopfhörern ist die so genannte Head-Related Transfer Function (HRTF). Es ist die Wissenschaft zu verstehen, wie sich die Kopfform und Ohrposition eines jeden Menschen darauf auswirken kann, wie Sie Geräusche in drei Dimensionen hören und verarbeiten.

Es ist möglich, mit einem generischen HRTF-Profil, das für die meisten Menschen funktioniert, effektive räumliche Audioerlebnisse zu liefern, aber je mehr Ihre spezifische HRTF verwendet werden kann, desto besser kann – theoretisch – räumliches Audio sein. Apple ist nicht das erste Unternehmen, das die Kameras eines Telefons auf diese Weise nutzt: Die Kopfhörer-App von Sony, die mit Produkten wie dem WH-1000XM4 , XM5 und WF-1000XM4 verwendet wird, wird Sie dazu ermutigen, Fotos von beiden Ohren zu machen damit es kann den Klang seines eigenen räumlichen Audioformats Sony 360 Reality Audio (360RA) optimieren.

Apple unterstützt derzeit zwei Arten von räumlichem Audio. Mit Standard Spatial Audio können Sie Dinge wie Dolby Atmos Music auf jedem Stereo-Kopfhörer von Apple Music und anderen Streaming-Diensten genießen, die Atmos Music unterstützen. Head-Tracking Spatial Audio bringt dieses Konzept auf die nächste Stufe, indem es eine zusätzliche Immersionsebene hinzufügt. Beim Hören von räumlichen Audiomusikformaten können bestimmte Elemente eines Songs im 3D-Raum verankert werden, wie z. B. der Gesang. Wenn Sie Ihren Kopf bewegen, scheint es, als käme die Gesangsquelle aus einer Richtung und nicht von überall um Sie herum.

Bei Filmen kann Head-Tracking Spatial Audio den Anschein erwecken, als säßen Sie in einem vollwertigen 5.1-Heimkino, einschließlich des Gefühls, dass Ihr Bildschirm (wie ein iPhone, iPad usw.) die Quelle von Dialogen und anderen wichtigen Soundtracks ist Elemente.

Wir wissen noch nicht, wie Apple die True-Depth-Kameras des iPhones nutzen wird, um ein personalisierteres räumliches Audioerlebnis zu schaffen, aber wir lassen es Sie wissen, sobald wir es herausfinden.