Originally published at: Microsoft Copilot Vision & Voice: Quantensprung für die KI-Assistenz
Mit den neuen Updates „Microsoft Copilot Vision“ und „Copilot Voice“ hebt Microsoft seine KI-Assistenz auf ein neues Level. Copilot kann nun sehen und sprechen, also Inhalte visuell analysieren und per Sprache interagieren. So werden viele Aufgaben einfacher, schneller und intuitiver. Aktuell steht die Funktion nur Privatanwendern zur Verfügung, soll aber bald auch für Geschäftskunden von Microsoft 365 und Office 365 folgen.
1. Was ist Microsoft Copilot Vision? Features & Funktionsweise (inkl. Copilot Voice)
|
„Copilot Vision“ ist eine Erweiterung der klassischen Microsoft Copilot KI-Technologie und ermöglicht der KI, nun auch visuelle Inhalte (auf Ihrem Bildschirm oder über Ihre Kamera) in Echtzeit zu erkennen, zu analysieren und kontextbezogene Unterstützung dazu zu liefern. Von alltäglichen und grundsätzlichen Fragen bis zu komplexen Aufgaben. Der KI-Assistent sieht durch das Vision-Update nun also auch das, was Sie als Nutzer auf Ihrem Bildschirm oder durch Ihre Kamera sehen – von Fotos und Webseiten über Grafiken und Diagramme bis zu Benutzeroberflächen in Apps oder der Funktionsweise von Computerspielen. Der große Vorteil: Sie müssen das künftig nicht mehr umständlich im Prompt beschreiben! |
Mit dem Update „Copilot Voice“ verarbeitet Microsofts intelligenter KI-Chatbot zudem nicht mehr nur reine Texteingaben als Prompts, sondern versteht nun auch gesprochene Eingabeaufforderungen und liefert gesprochene Antworten – fast wie eine echte Unterhaltung. Diese neue Sprachsteuerungsfunktion wird seit Frühjahr 2024 schrittweise in die Copilot-App für Windows, macOS und Mobilgeräte sowie in den Edge-Browser eingeführt. Die neue Copilot Voice Funktion wird mittels des Mikrofon-Symbols im Chat-Eingabefeld aktiviert. Tipp: In den Einstellungen direkt daneben kann man zwischen verschiedenen Charakteren (Stimmen, Geschlecht und Art des Antwortverhaltens) auswählen. |
Die Kernfunktionen von Microsoft Copilot Vision & Voice im Überblick:
- Visuelle Bildschirm- und Kontextanalyse: Copilot Vision kann die Inhalte und Funktionsweise von geöffneten Apps, Webseiten, PDFs, Dokumenten und Benutzeroberflächen automatisch erkennen und interpretieren, ohne dass…