Microsoft kündigt ein umfangreiches KI-Upgrade für Windows mit einer intelligenteren Copilot-Funktion an

Microsoft hat heute in einem Blogbeitrag Verbesserungen an Copilot angekündigt, darunter eine neue Vision-Funktion, die es dem KI-Assistenten ermöglicht, die Windows-Bildschirme der Benutzer in Echtzeit anzuzeigen und mit ihnen zu interagieren.

Im Rahmen des 50-jährigen Jubiläums von Microsoft kündigte das Unternehmen eine enorme Verbesserung von Copilot an, die es personalisierter macht und Benutzer bei jedem Schritt durch Aufgaben führt. Letztes Jahr hat Microsoft Vision in Copilot für das Web eingeführt, die Ankündigung gilt jetzt jedoch für Windows und Mobilgeräte. Sie können die native Windows-App verwenden, um Copilot beim Arbeiten mit verschiedenen Apps, Dateien und Browser-Registerkarten zu verwenden. Vision in Copilot liest Ihren Bildschirm und interagiert mit ihm.

Mit Copilot können Sie Dateien suchen, organisieren, Einstellungen ändern und gemeinsam an Projekten arbeiten, ohne ständig Apps oder Dateien wechseln zu müssen. Sie können auf die Copilot-App zugreifen, indem Sie Alt + Leertaste drücken oder für Sprachbefehle zwei Sekunden lang Alt + Leertaste drücken. Laut Microsoft ist die native Copilot-App ab sofort verfügbar, die Vision-Funktion wird jedoch zunächst nächste Woche im Windows Insider-Programm für zukünftige Tests verfügbar sein. Der Softwareriese hat kein konkretes allgemeines Veröffentlichungsdatum genannt, wir können also nur warten.

Während einer Demo zeigte Microsoft, wie Copilot einen zweiten Cursor hinzufügte, um Benutzer zu führen, indem er die Schaltflächen hervorhebt, die sie anklicken müssen. In Photoshop zeigte Copilot Vision beispielsweise bestimmte Werkzeuge und die Schritte an, die der Benutzer als Nächstes befolgen musste. Die Vision-Funktion nutzte Sprachanweisungen und visuelle Hinweise, um ein interaktiveres Erlebnis zu bieten, was einen großen Fortschritt darstellt.

Während Vision die Interaktion mit Ihrem Windows-Computer erleichtern könnte, könnte die Gewährung von Zugriffsrechten für einen KI-Assistenten auf alles auf Ihrem Bildschirm Datenschutzbedenken aufwerfen. Aber Microsoft hat gesagt, dass die Sitzungen ausschließlich Opt-in-fähig und kurzlebig sind. Microsoft behauptet, dass Copilot Vision nichts speichert oder verwendet, mit dem es interagiert. Microsoft sagt außerdem, dass Copilot Vision Fragen darüber beantworten kann, was auf Ihrem Bildschirm angezeigt wird, und liefert ein Beispiel mit den Worten: „Stellen Sie sich vor, Sie versuchen, eine neue Wohnung einzurichten. Copilot Vision kann Ihnen bei der Suche nach Möbeln helfen, die richtige Farbpalette finden, Ihre Optionen für alles von Teppichen bis zu Überwürfen durchdenken und sogar Möglichkeiten vorschlagen, das, was Sie sehen, anzuordnen.“