Die Nutzung von Microsofts Copilot Vision AI ist jetzt kostenlos, allerdings nur für diese 9 Websites

Eskere Guru

Nach Monaten voller Teaser, Vorschauen und ausgewählter Rollouts steht Microsofts Copilot Vision nun allen Edge-Benutzern in den USA zum Testen zur Verfügung. Das auffällige neue KI-Tool ist so konzipiert, dass es Ihren Bildschirm beim Surfen beobachtet, sodass Sie ihm verschiedene Fragen zu Ihrer Arbeit stellen und nützliche, kontextgerechte Antworten erhalten können. Der größte Haken ist jedoch, dass es derzeit nur mit neun Websites funktioniert.

Meistens scheinen diese neun Websites auch eine ziemlich zufällige Auswahl zu sein. Wir haben Amazon, was Sinn macht, aber auch Geoguessr? Ich bin mir ziemlich sicher, dass der Zweck dieser Website darin besteht, ohne Hilfe zu erraten, wo Sie sich auf der Karte befinden. Wie auch immer, die vollständige Site-Liste lautet wie folgt:

Copilot Vision-kompatible Websites.
Microsoft
  • Wikipedia
  • Tripadvisor
  • Williams Sonoma
  • Amazonas
  • Ziel
  • Wayfair
  • Essen und Wein
  • OpenTable
  • Geoguessr

Mustafa Suleyman, CEO von Microsoft AI, kündigte gestern die Veröffentlichung auf Bluesky an und teilte einige seiner Lieblingsanwendungsfälle mit.

Copilot Vision ist jetzt kostenlos in Edge erhältlich. Es kann buchstäblich sehen, was Sie auf dem Bildschirm sehen (wenn Sie sich dafür entscheiden). Ziemlich erstaunlich! Es wird Sie beim Surfen im Internet laut mitdenken. Kein übermäßiges Erklären, Kopieren und Einfügen mehr oder Mühe, etwas in Worte zu fassen.

— Mustafa Suleyman (@mustafasuleymanai.bsky.social) 2025-04-16T17:05:32.762Z

Wenn Sie Copilot eine Frage stellen möchten, müssen Sie normalerweise die kontextbezogenen Absätze selbst aufschreiben. Dies ist nicht nur langsam und nervig, sondern kann auch ziemlich schwierig sein, wenn Sie versuchen, etwas zu fragen, worüber Sie nicht viel wissen.

Mit Copilot Vision kann das KI-Modell es direkt auf Ihrem Bildschirm sehen, anstatt zu beschreiben, was Sie sehen oder worüber Sie sprechen.

Nach Suleymans Beispielen können Sie also auf Amazon nach „atmungsaktiven Bettlaken“ suchen und Copilot fragen, ob eines der Ergebnisse aus geeigneten Stoffen besteht. Copilot kann Sie auf die richtigen Stoffe hinweisen oder Ihnen Beispiele für atmungsaktive Stoffe geben, nach denen Sie suchen können.

Auf der Food & Wine-Rezept-Website kann Ihnen Copilot dabei helfen, beim Kochen die Hände frei zu haben, indem er Ihre Fragen beantwortet und Ihnen Teile des Rezepts vorliest. Das funktioniert, weil das gesamte Erlebnis darauf ausgelegt ist, über Sprache zu funktionieren – Sie sprechen direkt mit der KI und die KI antwortet.

Laut einem der Videos auf der Copilot Vision-Seite sieht es jedoch so aus, als ob man auch Fragen eintippen und schriftliche Antworten erhalten kann.

Copilot Vision hilft bei der Jobsuche.
Microsoft

Microsoft geht mit dieser Funktion sehr langsam und vorsichtig vor, mit ziemlicher Sicherheit, weil es vermeiden möchte, eine weitere Gegenreaktion auszulösen, wie es bei Recall der Fall war. Die begrenzte Anzahl kompatibler Websites hängt mit Urheberrechtsproblemen zusammen, und das Unternehmen betont, dass die Funktion „Opt-in“ ist, Ihren Bildschirm nicht aufzeichnet, nur dann aktiv ist, wenn Sie sie einschalten, und die Daten löscht, sobald Sie eine Sitzung beenden.

Wenn Sie daran interessiert sind, es auszuprobieren, können Sie es auf der Microsoft-Website einrichten und sich ein kleines Tutorial ansehen.