Microsoft bestätigt mindestens sieben neue On-Device-KI-Funktionen für Windows 11 24H2. Zu diesen Funktionen gehören Windows Recall, Windows Studio-Effekte, Live-Untertitel, Super Resolution, Voice Clarity, Cocreator für die Paint-App und Restyle Image für die Fotos-App. Dies gilt zusätzlich zu verschiedenen Änderungen an Copilot für Windows 11.
Windows 11 24H2 (Update 2024) wird eine Reihe neuer Funktionen einführen, wobei der Schwerpunkt deutlich auf KI liegt. In diesem Leitfaden werde ich auf diese KI-zentrierten Funktionen eingehen und ihre Bedeutung hervorheben und wie sie Ihr Erlebnis verbessern.
In dieser neuen Version des Betriebssystems können Sie mindestens sieben neue KI-Funktionen erwarten wird auf dem Gerät ausgeführt, einschließlich Windows Recall, Windows Studio-Effekten, Live-Untertiteln (Echtzeitübersetzungen), Super Resolution, Voice Clarity, Cocreator für die Paint-App und Restyle Image für die Fotos-App. (Diese Funktionen sind exklusiv für Copilot+-PCs verfügbar.)
Die neuen Funktionen sind möglich dank neue „Windows Copilot Runtime“, eine Systemkomponente unter Windows 11, die mehr als 40 KI-Modelle integriert, die lokal auf dem Computer ausgeführt werden, und die Infrastruktur für deren Wartung bereitstellt.
Nur @media-Bildschirm und (min-width: 0px) und (min-height: 0px) { div[id^=”bsa-zone_1659356505923-0_123456″] { min-width: 336px ; Min.-Höhe: 280 Pixel; min-height: 280px; } }
Dies ermöglicht Entwicklern auch die Integration ihrer Apps mit KI-Funktionalitäten mithilfe der neuen APIs über Windows Copilot-Bibliothek.
In Darüber hinaus wird das Windows 11 2024 Update auch verschiedene bedeutende Änderungen und neue Funktionen für die Copilot-Chatbot-KI einführen.
Windows 11 AI-Funktionen für Version 24H2
Hier finden Sie eine Übersicht über die Neuerungen Von KI unterstützte Funktionen.
Windows Recall
Windows Recall (oder Recall) ist eine neue Funktion, die als fotografischer Speicher fungiert, der im Hintergrund läuft und Schnappschüsse von allem macht, was Sie tun der Computer. Unter Verwendung mehrerer lokal auf dem Gerät arbeitender KI-Modelle analysiert die Funktion jeden Inhalt und macht ihn in natürlicher Sprache durchsuchbar, unabhängig davon, ob es sich um Text oder Bilder handelt.
Benutzeroberfläche/Bild der Recall-App: Microsoft
Die Recall-Funktion ist eine Exklusive Funktion für Copilot+-PCs, da hierfür der neueste Prozessor der Qualcomm Snapdragon-of-Box-Erlebnis (OOBE), kann Recall jedoch manuell über die Einstellungen-App oder Gruppenrichtlinie aktivieren oder deaktivieren.
Windows Studio-Effekte
Windows Studio-Effekte (oder Studio Effects) ist eine Kombination von Funktionen, die KI zur Verbesserung nutzt Videoanrufe und Audioqualität mithilfe einer Neural Processing Unit (NPU).
Schnelleinstellungen für Studioeffekte (Quelle: Microsoft)
Derzeit gibt es vier Haupteinstellungen Effekte, einschließlich automatischem Rahmen, Hintergrundunschärfe, Augenkontakt, Sprachfokus, Porträtlicht, Kreativfiltern und Blickkontakt-Teleprompter.
Automatischer Rahmen: Hält Sie im Blickfeld der Kamera, auch wenn Du bewegst dich. Hintergrundunschärfe: Verwischt den Hintergrund hinter Ihnen während eines Anrufs und sorgt so für mehr Privatsphäre oder verbirgt Unordnung. Augenkontakt: Da Sie während eines Anrufs möglicherweise auf Ihren Bildschirm schauen, erweckt diese Funktion den Eindruck, dass Sie Augenkontakt mit anderen Personen halten. Sprachfokus: Dieser Effekt reduziert Hintergrundgeräusche von Ihrem Mikrofon und macht Ihre Stimme bei Anrufen klarer.
Es ist wichtig zu beachten, dass Studio-Effekte schon seit einiger Zeit Teil von Windows 11 sind, aber ab Version 24H2 plant Microsoft, diese Funktionen auf Copilot+-PCs breiter verfügbar zu machen.
Live-Untertitel mit Übersetzung
Obwohl Windows 11 schon seit einiger Zeit über die Funktion „Live-Untertitel“ verfügt, wird sie jetzt mit Live-Übersetzungen aktualisiert. Live Captions ist eine Funktion, die jedem, auch Menschen mit Hörproblemen, dabei helfen soll, Audio durch automatische Transkriptionen zu verstehen.
Übersetzung von Live-Untertiteln mit KI/Bild: Microsoft
Als Teil der KI-Integration im Betriebssystem kann die Funktion auch Konvertierungen von einem Video-oder Nur-Sprachanruf in Ihre Muttersprache übersetzen, einschließlich Videos, die Sie von YouTube oder anderen Quellen ansehen. Technisch gesehen ist die Funktion nun in der Lage, jedes Audiosignal, das den Computer durchläuft, in Echtzeit zu übersetzen.
Das Audiosignal kann live oder vorab von einer beliebigen App oder einem beliebigen Video aufgezeichnet werden. Die Funktion kann auch ohne Internetverbindung über 40 Sprachen ins Englische übersetzen, da für die Funktion eine NPU erforderlich ist.
Voice Clarity
Unter Windows 11 ist Voice Clarity eine KI-gestützte Funktion Funktion, die Hintergrundgeräusche entfernt, Echos unterdrückt und Echtzeit-Nachhall bei Video-oder Nur-Sprachanrufen oder beim Aufzeichnen von Audio reduziert.
Darüber hinaus kommt diese Funktion auch PC-Spielen mit Online-Kommunikation zugute. Apps können die „Deep Noise Suppression“ für reine Sprach-oder generische Audioinhalte umschalten. Voice Clarity sorgt für eine klare Stimme in Online-Besprechungen und eine reibungslosere Online-Kommunikation.
Voice Clarity funktioniert automatisch bei unterstützten Anwendungen mit unterstützter Hardware, einschließlich NPU. Sie werden keine Option finden, die besagt, dass Sie die Sprachklarheit aktivieren sollen.
Auto Super Resolution
Auto Super Resolution (SR) ist eine Funktion, die KI verwendet, um die Spielauflösung zu erhöhen visuelle Qualität, die ein flüssigeres, effizienteres Erlebnis bietet, das sich über die gesamte Hardware hinweg skalieren lässt, einschließlich besserer Bildraten. Mit anderen Worten: Super Resolution nutzt KI, um Spiele zu skalieren und die Bildraten und Bildqualität zu verbessern.
Automatische Superauflösung/Bild: Mauro Huculak
Die Funktion ähnelt Nvidias DLSS, AMDs FidelityFX Super Resolution (FSR) und Intels Xe Super Sampling (XeSS), das ebenfalls KI zur Hochskalierung von Spielen nutzt.
Im Rahmen dieser Funktion Microsoft hat außerdem in Zusammenarbeit mit Nvidia, AMD und Intel die „DirectSR“-API entwickelt, um SR in die nächste Generation von Spielen zu integrieren.
Microsoft wird die Funktion exklusiv für Copilot+-PCs mit dem anbieten Die neuesten Qualcomm Snapdragon >Cocreator-Funktion, die Ihre Zeichnung scannt, anstatt ein KI-Bild für Sie zu erstellen, und Ihnen hilft, ein neues Kunstwerk zu erstellen, das Sie mit Ihren Ideen verfeinern, bearbeiten und weiterentwickeln können.
Cocreator für Farbe/Bild: Microsoft
Diese Funktion verwendet einen diffusionsbasierten Algorithmus, um mit minimalem Aufwand ein qualitativ hochwertiges Bild zu erzeugen.
Cocreator enthält sogar eine Einstellung, um die Zeichnung zu verbessern wörtlich oder ausdrucksvoller.
Cocreator ist eine KI-Funktion exklusiv für Copilot+-PCs, sollte aber nicht mit „Image Creator“ verwechselt werden, einer ebenfalls KI-Funktion, die die Cloud zum Konvertieren einer Textaufforderung verwendet in ein Bild umwandeln.
Bild für Fotos neu gestalten
In der Fotos-App fügt Microsoft als Teil von Windows 11 24H2 und exklusiv für die Copilot+ PCs ein neues „Restyle“ hinzu Bild“, das KI mit der NPU des Geräts verwendet, um den Stil eines Fotos mithilfe von Bilderzeugungs-und Fotobearbeitungstechniken zu ändern.
Fotos Restyle Image/Bild: Microsoft
Mit dieser Funktion können Sie ein Bild auswählen und das Bild dann mit neuen Stilen umwandeln, ähnlich wie bei der Verwendung von Filtern auf Ihrem Telefon. Sie können sogar eine Textaufforderung verwenden, um einen neuen Hintergrund zu erstellen.
Die Fotos-App erhält außerdem die gleiche „Image Creator“-Funktion wie die Paint-App, die Ihnen dies ermöglicht Erstellen Sie KI-Bilder mit einer einzigen Textaufforderung. Diese Funktion ist nicht nur für Copilot+-PCs verfügbar, da keine NPU erforderlich ist, da der Vorgang in der Cloud mit Copilot unter Verwendung des DALL-E-Sprachmodells erfolgt.
Copilot für Windows 11
Obwohl Copilot seit einiger Zeit für Windows 11 verfügbar ist, wird Microsoft ab Version 24H2 einige Änderungen vornehmen. In dieser neuen Version wird Copilot beispielsweise zu einer traditionellen App, die Sie nutzen können Sie können sie wie jede andere App auch in der Größe anheften oder von ihr lösen.
Neue Copilot-App/Bild: Mauro Huculak
Bei der App handelt es sich eigentlich um die Webversion von Copilot, die als Web-App unter Windows 11 installiert ist. Sie funktioniert wie zuvor, der Unterschied besteht jedoch darin, dass Systemeinstellungen nicht mehr geändert werden können. Außerdem wurde die Benutzeroberfläche mit einem neuen Design aktualisiert, das dem OpenAI ChatGPT-Erlebnis im Web ähnelt.
Darüber hinaus plant Microsoft, Copilot bald mit OpenAI GPT-4o (oder GPT-4 Omni) zu aktualisieren ist ein neues leistungsstarkes Sprachmodell, das Informationen in verschiedenen Formaten wie Text, Bildern und sogar Audio versteht und verarbeitet.
Copilot kommt auch in die Einstellungen-App. Sie erhalten jedoch keine Schaltfläche zum Aufrufen des Chatbots. Stattdessen finden Sie in den Einstellungen „Copilot-Vorschläge“. Wenn Sie sich beispielsweise im Systembereich befinden, sehen Sie möglicherweise eine Sammlung von Vorschlägen zum Beheben von Audioproblemen, zum Aktivieren der Energiesparfunktion oder zum Streamen Ihres Bildschirms ein drahtloses Display.
Einstellungen mit Copilot-Vorschlägen/Bild: Microsoft
Im Datei-Explorer plant Microsoft die Einführung von Copilot, damit Sie Aufgaben in weniger Schritten erledigen können. Wenn Sie sich beispielsweise auf der Registerkarte „Galerie“ befinden, können Sie mit der Maus über ein Bild fahren und durch Klicken auf die Copilot-Schaltfläche werden verschiedene Aktionen angezeigt, die Sie auf die Bilddatei anwenden können.
Datei-Explorer mit Copilot-Vorschlägen/Bild: Microsoft
Darüber hinaus kommt Copilot auch zu Benachrichtigungen. Wenn Sie eine Toast-Benachrichtigung erhalten, erscheint Copilot mit einem Vorschlag für die Durchführung in diesem speziellen Fall. Wenn Sie beispielsweise eine E-Mail mit einem PowerPoint-Anhang erhalten, schlägt der Chatbot möglicherweise eine Zusammenfassung des Inhalts vor.
Benachrichtigungen mit Copilot-Vorschlägen/Bild: Microsoft
Unter Windows 11 bedeutet dies auch, dass Sie Ihren Bildschirm mit Copilot teilen können, um Unterstützung bei allem zu erhalten, was Sie tun.
Es ist auch wichtig darauf hinzuweisen, dass Entwickler jetzt damit beginnen werden, KI in ihre Apps zu integrieren. Das bedeutet, dass wir ab der nächsten Version des Betriebssystems mehr Apps mit KI-Funktionen sehen werden.
Fazit:
Das Betriebssystem wird bei einigen ein neues Funktionsupdate erhalten Die Einführung der neuen Funktionen beginnt am 18. Juni für Copilot+-PCs, während die endgültige Version des Funktionsupdates irgendwann im September oder Oktober für alle verfügbar sein soll. Sobald die neue Version für alle verfügbar ist, wird Microsoft die verbleibenden Funktionen und Änderungen für Copilot+-PCs einführen.
[eingebetteter Inhalt]
Copilot+-PCs sind eine neue Kategorie von Computern mit KI Fähigkeiten. Die erste Gerätewelle wird mit Prozessoren der Qualcomm Snapdragon Diese Geräte verfügen über mindestens 16 GB Arbeitsspeicher und 256 GB Speicher. Es wird erwartet, dass Intel und AMD in Zukunft Prozessoren mit NPUs herausbringen werden, um diese neuen Erfahrungen zu bewältigen.
Einige davon Neue Copilot+-PCs umfassen das Surface Pro (11. Edition), das Surface Laptop (7. Edition), das Acer Swift 14 AI, das HP Omnibook X und das HP EliteBook Ultra G1q , Lenovo Yoga Slim 7x, Samsung Galaxy Book4 Edge-Serie, ASUS Vivobook S 15 und Dell-Laptops wie XPS 13, Inspiron 14, Inspiron 14 Plus, Latitude 5455 und Latitude 7455.
