„Benutze einfach deinen Mund!“ Mit der neuen Siri-App des nächsten Jahres kannst du dein iPhone freihändig benutzen
Eine der Revolutionen, die das iPhone in der Smartphone-Branche mit sich brachte, war der Multitouch-Bildschirm. In den folgenden 18 Jahren entwickelte sich die Berührung allmählich zu einer der wichtigsten Möglichkeiten, mit elektronischen Geräten zu interagieren.
Doch Apple meint: Touch allein reicht nicht.
Tatsächlich haben wir bei Vision Pro bereits eine reine Gesteninteraktion auf Basis visueller Erkennung gesehen, die unter den aktuellen AR-Geräten fast die unsichtbarste Lösung darstellt.
Einige neue Erkenntnisse deuten darauf hin, dass Apple auch eine andere reine Sprachlösung für die Mensch-Computer-Interaktion auf Basis von Siri ausprobiert.
Das Bild wird mit Gemini generiert, da Image Playground nicht verwendet werden kann.
Erst gestern wies Bloomberg-Reporter Mark Gurman in einer aktuellen Prognose darauf hin: Die seit 26 Jahren verzögerte KI Siri könnte es Nutzern durch die Stärkung von App Intents indirekt ermöglichen, das iPhone vollständig per Sprachfernbedienung zu bedienen.
Dies ist ein großer Kuchen, den Apple bereits auf der WWDC 2024 gemalt hatte. In einer Anzeige, der irreführende Werbung vorgeworfen wurde, zeigte Apple die Schauspielerin Bella Ramsey, die Siri Fragen stellte, und Siri, die Informationen über Apps hinweg sammelte und Antworten gab:
In der Anzeige fragt Bella Siri nach den Namen der Teilnehmer einer Veranstaltung und Siri antwortet, indem sie schnell ihren Kalender aufruft. | YouTube @QuirkyFilms
Da Apple Intelligence eine solche Funktion nie erreichen konnte, wurde dieser Werbespot aus den Regalen von Apple entfernt und „Smarter Siri“ auf 2026 verschoben.
Laut Marc Gurman stellen die wiederholten Verzögerungen der KI Siri selbst kein großes Problem dar. Vielmehr sei die zugrundeliegende Funktion, auf der diese Funktion beruht, der Aufmerksamkeit wert.
Wenn die neue KI Siri die großen Versprechen erfüllen will, die Apple auf den beiden WWDCs und Pressekonferenzen gemacht hat, muss die App Intents-Funktion von iOS in Zukunft erheblich verbessert werden.
Bild: Fast Company
Möglicherweise haben Sie noch nie von dem Namen App Intents gehört, was nicht überraschend ist, da es sich dabei nicht um eine separate Funktion handelt, sondern um ein Systemfunktionsframework, das von Apple 2022 in iOS 16 eingeführt wurde und die früheren SiriKit Intents ersetzt. Es handelt sich dabei hauptsächlich um eine Funktion für Entwickler.
Bild: Apple Developers
Die Funktion von App Intents entspricht genau seinem Namen und dient hauptsächlich dazu, die „Absicht“ einer App anzuzeigen.
Nehmen wir zum Beispiel die Spotlight-Suche von iOS. Neben der direkten Suche nach Apps können Sie hier auch einige Funktionsaufforderungen wie „Erstellen“ oder „Scannen“ eingeben, woraufhin das System automatisch einige Funktionseinträge innerhalb der App zur Auswahl aufruft:
Dies demonstriert auch intuitiv die grundlegende Funktion von App Intents: Erstellen eines „Schnellkanals“ für verschiedene Funktionen, die ursprünglich in der App enthalten waren, und Integrieren der Eingänge dieser Schnellkanäle mit Funktionen auf iOS-Systemebene (wie Siri, Fokussuche, Verknüpfungen usw.), sodass Benutzer sie schnell aufrufen können, ohne die App zu öffnen .
Bild: Apple Developers
Genau das hat Marc Gurman vorhergesagt: Die neue KI Siri wird in Zukunft in der Lage sein, komplexere Operationen durchzuführen.
Zufälligerweise gibt es ähnliche Funktionsverknüpfungen nicht nur bei Apple. Auch Huaweis HarmonyOS verfügt über einen ähnlichen Dienst namens Intents Kit, der für die Verknüpfung von Systemeingaben mit Funktionen innerhalb von Apps oder Metadiensten zuständig ist:
Abbildung｜Huawei Developer Alliance
Aufgrund der Werbemaßnahmen und Zugangsbeschränkungen von Apple können jedoch nur die drei oben genannten Hauptelemente – Siri, Fokussuche und Verknüpfungen – App Intents aufrufen, um Vorgänge in iOS auszuführen.
Angesichts der begrenzten Nutzerbasis von Siri und der begrenzten Nutzerbasis für die gezielte Suche werden Kurzbefehle am häufigsten verwendet. Diese Kurzbefehle, wie die schnelle Kontoführung, das Zuschneiden und Wasserzeichen von Fotos und das Senden der Fotos vom Vortag zur Dateiübertragung an WeChat, funktionieren im Wesentlichen alle über App Intents.
Springen Sie durch gezielte Suche direkt zur internen Scanfunktion von Alipay
Was die zukünftigen automatisierten Vorgänge angeht, die von der KI Siri gesteuert werden, so glaubt iFanr, dass es sich bei der aktuellen Shortcut-Methode zum Aufrufen von App-Intents um eine sehr einfache „Zwei-Schritt-Logik“ handeln wird:
- Stärkung der App-Funktionen, die direkt von App Intents aufgerufen werden können. Das aktuelle App Intents-Framework erfordert aktives Schreiben durch Entwickler, und die Anzahl der Apps, die es abdecken kann, ist sehr begrenzt. Apple könnte später eine neue API entwickeln, die es dem System ermöglicht, die App-Funktionsliste direkt zu lesen und so den Umfang der App Intents-Aufrufe zu erweitern.
- Das Sprachmodell von Apple Intelligence kann Siri dabei helfen, Sprachbefehle des Benutzers besser zu segmentieren und zu verstehen. Außerdem kann es mithilfe des geräteseitigen Modells auf dem iPhone natürliche Sprachbefehle in eine Kombination aus sequenziell aufgerufenen App-Intents umwandeln und so eine automatische Ausführung komplexer Schritte ermöglichen.
Marc Gurman prognostiziert, dass Apple diese neue Kombination aus KI Siri und App Intents möglicherweise schon auf der Frühjahrskonferenz 2026 vorstellen wird. Zu diesem Zeitpunkt könnten die möglichen Aktionen ähnlich sein wie: „Hey Siri, schneide alle Fotos vom Abendessen von gestern Abend in Quadrate zu, schicke sie an XXXs WeChat und erstelle denselben Zeitplan für nächsten Samstag“, und man muss das iPhone überhaupt nicht berühren.
Bild: Lifehacker
Zuvor muss diese neue Sprachsteuerungsmethode jedoch noch langfristige Tests durchlaufen, insbesondere für einige Hochrisikoszenarien (wie Alipay-Zahlungen oder die internetbasierte Steuerung medizinischer Geräte usw.), die eine strengere Steuerung des Siri-Modells erfordern. Es ist nicht ausgeschlossen, dass dies im Frühjahr nächsten Jahres erneut verschoben wird.
Aus Produktsicht wird diese vollständig sprachbasierte Bedienmethode zwar zunächst auf dem iPhone implementiert, wird aber in Zukunft definitiv in mehr Szenarien als nur Smartphones zum Einsatz kommen.
Stattdessen werden Apple Watch, HomePod und sogar der gemunkelte Smart-Home-Zentralsteuerungsbildschirm und Desktop-Roboter sowie AR-Geräte wie Vision Pro die Hauptnutznießer der reinen Siri-Sprachinteraktion sein.
Mit anderen Worten: Dieser „Kombinationsschlag“ aus KI Siri und verbesserten App Intents ist ein neues interaktives System, das sowohl barrierefreien Benutzern als auch neuen Produktformen zugutekommt, was sehr gut mit unserer bisherigen Vorstellung von Apples leistungsstarker Fähigkeit übereinstimmt, Software und Hardware zu kombinieren.
Jetzt muss Apple es nur noch termingerecht ausliefern.
#Willkommen beim offiziellen öffentlichen WeChat-Konto von iFaner: iFaner (WeChat-ID: ifanr), wo Ihnen so bald wie möglich weitere spannende Inhalte präsentiert werden.