Die Gemini-App erhält endlich das weltweit verständliche Project Astra-Update
Auf dem MWC 2025 bestätigte Google, dass sein experimenteller Project Astra-Assistent im März flächendeckend eingeführt wird. Es scheint, dass die Funktion begonnen hat, Benutzer zu erreichen, wenn auch schrittweise, beginnend mit Android-Smartphones.
Auf Reddit hat ein Benutzer ein Demovideo geteilt , das eine neue Option „Bildschirm mit Live teilen“ zeigt, wenn der Gemini-Assistent aufgerufen wird. Darüber hinaus erhielt die Gemini Live-Oberfläche zwei neue Optionen für Live-Video und Bildschirmfreigabe.
Google hat gegenüber The Verge außerdem bestätigt, dass die oben genannten Funktionen nun auf dem Weg zur Einführung sind. Bisher war Gemini nur dank der Funktion „Nach Bildschirm fragen“ in der Lage, eine kontextbezogene Anzeige auf dem Bildschirm zu ermöglichen.
Das Projekt Astra ist die Zukunft der Gemini-KI
Falls Sie es noch nicht kennen: Project Astra ist die futuristischste Version einer KI, die Text, Audio, Bilder, Videos und Live-Kamera-Feeds in Echtzeit verstehen kann. Greg Wayne, Forschungsdirektor von Google Deepmind, verglich es mit einem „kleinen Papagei auf deiner Schulter, der mit dir rumhängt und mit dir über die Welt spricht.“
Wenn Sie Gemini beschwören und die Option „Bildschirm mit Live teilen“ in einer beliebigen App aktivieren, analysiert diese den Bildschirminhalt und beantwortet darauf basierende Fragen. Benutzer können beispielsweise darum bitten, die aktuelle Aktivität in einer App zu beschreiben, einen gelesenen Artikel aufzuschlüsseln oder zusammenzufassen oder während der Videowiedergabe mit ihnen über die Szene zu sprechen.
Die beeindruckendere Fähigkeit ist das Weltverständnissystem. Wenn Sie für Gemini in den Live-Modus wechseln, wird jetzt eine Video-Feed-Option angezeigt, die die Kamera öffnet. Wenn Sie in diesem Modus Ihre Kamera auf ein beliebiges Objekt richten, kann Gemini basierend auf dem, was es sieht, Fragen sehen, verstehen und beantworten.
Die Kamera auf eine Buchpassage richten, Gemini bitten, mehr über ein Denkmal zu erzählen, Ratschläge zur Dekoration einholen oder auf einer Tafel oder einem Buch geschriebene Probleme lösen – das Project Astra-Upgrade von Gemini Live kann alles. Es unterscheidet sich nicht allzu sehr von Apples Visual Intelligence auf iPhones oder der Open-Source -App HuggingSnap, die eine Offline-KI verspricht, die die Welt versteht .
Digital Trends bekam Anfang dieses Jahres auf dem MWC eine Demo von Project Astra und bekam so einen ersten Vorgeschmack auf ein massiv verbessertes KI-Assistenten-Erlebnis auf Smartphones. Es ist erwähnenswert, dass das Project Astra-Upgrade von Gemini Live auf Kunden beschränkt ist, die für ein Gemini Advanced-Abonnement bezahlen.
Es scheint, dass der Umfang dieses Project Astra-Update-Rollouts derzeit nicht allzu groß ist. Ich habe ein Gemini Advanced-Abonnement über das Google One AI Premium-Bundle, sehe es aber noch auf keinem meiner Pixel-Telefone mit der neuesten stabilen Version von Android 15 oder der Betaversion von Android 16.