Η Microsoft μετατρέπει τα Windows 11 σε”AI PC”με μια σημαντική ενημέρωση Copilot που ανακοινώθηκε σήμερα, με στόχο να κάνει την αλληλεπίδραση με τους υπολογιστές πιο φυσική και έξυπνη.
Μια νέα λέξη αφύπνισης”Hey, Copilot”επιτρέπει στους χρήστες να δίνουν φωνητικές εντολές, ενώ το πλέον παγκοσμίως διαθέσιμο Copilot Vision επιτρέπει στο πείραμα AI να βλέπει και να κατανοεί τι υπάρχει στην οθόνη προεπισκόπησης.
Copilot Ενέργειες, οι οποίες εξουσιοδοτούν τον βοηθό να εκτελεί εργασίες απευθείας στον υπολογιστή για τον χρήστη. Αυτές οι ενημερώσεις, που κυκλοφορούν τώρα, αντιπροσωπεύουν το όραμα της Microsoft να ενσωματώσει σε βάθος έναν προληπτικό συνεργάτη τεχνητής νοημοσύνης στον πυρήνα του λειτουργικού της συστήματος.

‘Hey, Copilot’: Voice Becomes a Core PC Input
Η Microsoft κάνει μια ανανεωμένη και φιλόδοξη ώθηση για να καθιερώσει τη φωνή ως βασική μέθοδο αλληλεπίδρασης με υπολογιστή. Το κεντρικό στοιχείο αυτής της προσπάθειας είναι η νέα λέξη αφύπνισης «Hey, Copilot», που είναι πλέον γενικά διαθέσιμη, η οποία καταργεί μια συνομιλία για να ξεκινήσει μια συνομιλία. Αυτή η δυνατότητα είναι κεντρική στη στρατηγική της εταιρείας να κάνει το ισχυρό AI της πιο προσιτό σε ένα ευρύτερο κοινό.
Αυτή δεν είναι η πρώτη προσπάθεια της εταιρείας για ενσωμάτωση φωνής. Οι κριτικοί σπεύδουν να επισημάνουν τη θεαματική αποτυχία της Cortana στα Windows 10 πριν από μια δεκαετία. Ωστόσο, η Microsoft στοιχηματίζει ότι η πολυπλοκότητα της σύγχρονης τεχνητής νοημοσύνης θα πείσει επιτέλους τους χρήστες ότι η ομιλία στον υπολογιστή τους δεν είναι περίεργη, προκαλώντας μια πραγματική αλλαγή στη συμπεριφορά εκεί όπου οι προηγούμενες προσπάθειες δεν μπορούσαν.
Η εμπιστοσύνη της εταιρείας υποστηρίζεται από εσωτερικά δεδομένα που υποδηλώνουν ότι όταν οι άνθρωποι χρησιμοποιούν φωνή, αλληλεπιδρούν με το Copilot διπλάσια από ό,τι όταν χρησιμοποιούν τα υπάρχοντα λεπτά κειμένου.
μιλώντας στις ομάδες συναντήσεις και τη χρήση εργαλείων προσβασιμότητας, ως απόδειξη ότι οι χρήστες αισθάνονται ήδη άνετα να μιλούν στις συσκευές τους.
Η εμπειρία έχει σχεδιαστεί για να είναι απρόσκοπτη. Αφού ενεργοποιήσετε τη δυνατότητα συμμετοχής στις ρυθμίσεις, λέγοντας”Hey, Copilot”εμφανίζεται ένα εικονίδιο μικροφώνου και μια κουδούνισμα, επιβεβαιώνοντας ότι ο βοηθός ακούει. Οι χρήστες μπορούν να τερματίσουν τη συνομιλία λέγοντας «Αντίο» ή απλώς σταματώντας την αλληλεπίδρασή τους. Αυτή η ευκολία χρήσης είναι αυτό που πιστεύει η Microsoft ότι είναι το”μαγικό ξεκλείδωμα”για τη φωνή.
[ενσωματωμένο περιεχόμενο]
Ο Yusuf Mehdi, ο επικεφαλής καταναλωτών της Microsoft, πιστεύει ότι αυτή η αλλαγή θα είναι βαθιά. «Στο μυαλό μας, η φωνή θα γίνει πλέον ο τρίτος μηχανισμός εισόδου που θα χρησιμοποιηθεί με τον υπολογιστή σας», εξήγησε σε μια ενημέρωση.
Αυτή η φιλοδοξία ξεπερνά την απλή υπαγόρευση, τοποθετώντας τη φωνή ως εργαλείο για περίπλοκες εντολές και ερωτήματα που μπορούν να γεφυρώσουν το χάσμα μεταξύ της πρόθεσης ενός χρήστη και της ικανότητας της τεχνητής νοημοσύνης να προτρέπει την τεχνητή νοημοσύνη και την ολοκλήρωση της συνομιλίας.
“Θα πρέπει να μπορείτε να μιλάτε στον υπολογιστή σας, να σας καταλαβαίνει και μετά να μπορείτε να κάνετε μαγικά από αυτό.”
Ο Mehdi πρόσθεσε. Αυτό αντιπροσωπεύει ένα σημαντικό στοίχημα, στοιχηματίζοντας ότι η τεχνητή νοημοσύνη έκανε επιτέλους τη φωνητική αλληλεπίδραση αρκετά συναρπαστική ώστε να αλλάξει τις συνήθειες των χρηστών δεκαετιών που χτίστηκαν γύρω από το πληκτρολόγιο και το ποντίκι.
Ένα AI που βλέπει την οθόνη σας: Copilot Vision Κυκλοφορεί παγκοσμίως
Ένα βασικό στοιχείο αυτής της τεχνητής νοημοσύνης είναι διαθέσιμο στο μέλλον Copilot. προσφέρεται. Η δυνατότητα επιτρέπει στο AI να”βλέπει”και να αναλύει την οθόνη ενός χρήστη, παρέχοντας βοήθεια με βάση τα συμφραζόμενα σε οποιαδήποτε εφαρμογή.
Αυτή η δυνατότητα εξελίχθηκε γρήγορα από την πρώτη περιορισμένη προεπισκόπηση, η οποία περιοριζόταν στο πρόγραμμα περιήγησης Edge και απαιτούσε συνδρομή επί πληρωμή.
Η δυνατότητα μετατρέπει το Copilot από παθητικό chatbot σε ενεργό οπτικό οδηγό. Σε αντίθεση με την αμφιλεγόμενη δυνατότητα Ανάκλησης, το Vision είναι αυστηρά ενεργοποιημένο και δεν είναι πάντα ενεργοποιημένο.
Οι χρήστες πρέπει να παραχωρούν ρητά άδεια για κάθε περίοδο λειτουργίας κάνοντας κλικ σε ένα διακριτό”εικονίδιο γυαλιών”, ουσιαστικά με ροή της προβολής της οθόνης τους με τρόπο παρόμοιο με μια κλήση του Teams.
Μόλις ενεργοποιηθεί, το Vision για την αντιμετώπιση προβλημάτων στην οθόνη μπορεί να απαντήσει σε ερωτήσεις βήμα-βή-από-προβλήματα-στην οθόνη, μπορεί να απαντήσει σε ερωτήσεις βήμα-βή-από-προβλήματα-στην οθόνη. περιεχόμενο. Η δυνατότητα έχει επεκταθεί από την προβολή μεμονωμένων εφαρμογών σε μια πλήρη λειτουργία”Desktop Share”, η οποία επιτρέπει στο AI να κατανοήσει το πλαίσιο σε ολόκληρη τη ροή εργασίας ενός χρήστη.
[ενσωματωμένο περιεχόμενο]
Η ομάδα του Microsoft Copilot εξήγησε τη λειτουργικότητα, δηλώνοντας:”Όταν μοιράζεστε την επιφάνεια εργασίας σας (ή οποιοδήποτε συγκεκριμένο πρόγραμμα περιήγησης ή παράθυρο εφαρμογής), το Copilot μπορεί να δει τι βλέπετε για αυτό σε πραγματικό χρόνο.
Οι πρακτικές εφαρμογές είναι εκτενείς. Ένας χρήστης θα μπορούσε να ζητήσει συμβουλές για ένα δημιουργικό έργο, να λάβει βοήθεια για τη βελτίωση του βιογραφικού του ή να λάβει καθοδήγηση κατά την πλοήγηση σε ένα νέο παιχνίδι. Η λειτουργία”Highlights”επιτρέπει ακόμη και στο Copilot να υποδεικνύει οπτικά πού να κάνει κλικ για να ολοκληρώσει μια εργασία. Για παραγωγικότητα, μπορεί να αναλύσει μια ολόκληρη παρουσίαση PowerPoint για πληροφορίες χωρίς ο χρήστης να χρειάζεται να ξεφυλλίσει κάθε διαφάνεια.
Ενώ το Vision μπορεί να δει και να συμβουλεύει, δεν μπορεί να αναλάβει δράση για λογαριασμό του χρήστη. Αυτή η δυνατότητα δεσμεύεται για την ξεχωριστή λειτουργία Copilot Actions. Για να κάνει την εμπειρία πιο ευέλικτη, η Microsoft προετοιμάζει επίσης μια λειτουργία”Text-in Text-out”, επιτρέποντας στους χρήστες να αλληλεπιδρούν με το Vision μέσω κειμένου και όχι μόνο φωνής.
Αυτή η ευαισθητοποίηση σε όλο το σύστημα είναι ζωτικής σημασίας για την παροχή βοήθειας με πραγματικά συμφραζόμενα. Κατανοώντας τι κάνει ένας χρήστης, το Copilot μπορεί να προσφέρει σχετική υποστήριξη χωρίς να απαιτεί μακροσκελείς εξηγήσεις, πλησιάζοντας πιο κοντά στον στόχο του να είναι ένας «καθημερινός σύντροφος». Μια επανασχεδιασμένη γραμμή εργασιών παρέχει πρόσβαση με ένα κλικ σε αυτά τα εργαλεία, ενσωματώνοντάς τα περαιτέρω στην εμπειρία των Windows.Found. Πράκτορας: Οι Ενέργειες Copilot αναλαμβάνουν τον έλεγχο του υπολογιστή σας
Ίσως το πιο προοδευτικό στοιχείο της ενημέρωσης είναι η πειραματική προεπισκόπηση των ενεργειών Copilot για τοπικά αρχεία. Διαθέσιμο στους Windows Insiders μέσω του Copilot Labs, αυτή η δυνατότητα επιτρέπει στο AI να εκτελεί εργασίες πολλαπλών βημάτων> ενός χρήστη απευθείας σε έναν υπολογιστή. Αυτό σηματοδοτεί ένα σημαντικό βήμα προς ένα μέλλον πρακτορείου AI, όπου ο βοηθός δεν ανταποκρίνεται απλώς, αλλά εργάζεται ενεργά για λογαριασμό σας.
Αυτή η νέα δυνατότητα μετατρέπει το Copilot σε αυτό που η Microsoft αποκαλεί”πράκτορα γενικής χρήσης”. Αντί να απαντά απλώς σε ερωτήσεις, μπορεί να ανοίξει εφαρμογές, να πληκτρολογήσει, να πραγματοποιήσει κύλιση και να εκτελέσει σύνθετες αλυσίδες ενεργειών.
Οι χρήστες μπορούν να περιγράψουν μια εργασία με δικά τους λόγια—όπως ταξινόμηση φωτογραφιών διακοπών ή εξαγωγή πληροφοριών από ένα PDF—και ο πράκτορας θα προσπαθήσει να την ολοκληρώσει αλληλεπιδρώντας με επιτραπέζιους υπολογιστές και εφαρμογές ιστού.
Το σύστημα είναι σχεδιασμένο για να λειτουργεί σαν digitallabor col. Ενώ ο πράκτορας λειτουργεί στο παρασκήνιο, οι χρήστες είναι ελεύθεροι να εστιάσουν σε άλλα πράγματα. Οποιαδήποτε στιγμή, μπορούν να παρακολουθούν την πρόοδο του πράκτορα, να ελέγχουν τις συγκεκριμένες ενέργειες που έχει κάνει ή ακόμα και να ανακτούν τον έλεγχο της εργασίας εξ ολοκλήρου. Αυτή η δυνατότητα επεκτείνεται στις ενέργειες που βασίζονται στον ιστό που ανακοίνωσε για πρώτη φορά η Microsoft τον Απρίλιο, φέρνοντας τη δύναμη του αυτοματισμού απευθείας στον επιτραπέζιο υπολογιστή των Windows.
Ωστόσο, η εταιρεία είναι διαφανής σχετικά με την πειραματική της φύση και ξεκινά με χρήση από την πραγματική χρήση για βελτιστοποίηση περιπτώσεων.
Ο Navjot Virk, Εταιρικός Αντιπρόεδρος των Windows Experiences της Microsoft, προειδοποίησε ότι το σύστημα εξακολουθεί να μαθαίνει.”Στην αρχή μπορεί να δείτε τον πράκτορα να κάνει κάποια λάθη ή να αντιμετωπίσει κάποιες προκλήσεις όταν προσπαθεί να χρησιμοποιήσει μερικές πολύ περίπλοκες εφαρμογές”, σημείωσε.
Αυτή η διαφάνεια αποτελεί μέρος μιας σκόπιμης στρατηγικής για τη διαχείριση των προσδοκιών των χρηστών για αυτήν την ισχυρή αλλά εκκολαπτόμενη τεχνολογία.
[ενσωματωμένο περιεχόμενο]
Μάθηση από την Ανάκληση:
New Focus>Op>Microsoft είναι εύστοχα δίνοντας έμφαση στον σχεδιασμό με επίκεντρο το απόρρητο αυτών των νέων χαρακτηριστικών. Αυτή η προσεκτική προσέγγιση είναι μια άμεση και απαραίτητη απάντηση στις σφοδρές αντιδράσεις σχετικά με τη δυνατότητα ανάκλησης των Windows, η οποία επικρίθηκε έντονα για τις σημαντικές ευπάθειες ασφαλείας μετά την αποκάλυψή της.
Το Recall πωλήθηκε αρχικά με την υπόσχεση του απορρήτου στη συσκευή. Εκείνη την εποχή, ο Yusuf Mehdi δήλωσε:”Η ανάκληση αξιοποιεί το προσωπικό σημασιολογικό σας ευρετήριο, χτισμένο και αποθηκευμένο εξ ολοκλήρου στη συσκευή σας. Τα στιγμιότυπά σας είναι δικά σας, παραμένουν τοπικά στον υπολογιστή σας.”
Αυτή η υπόσχεση καταρρίφθηκε όταν οι ερευνητές ανακάλυψαν ότι το χαρακτηριστικό αποθήκευσε τα δεδομένα του σε μια μη κρυπτογραφημένη τοπική βάση δεδομένων, δημιουργώντας αυτό που πολλοί αποκαλούσαν”malware”
min>. ανάγκασε την εταιρεία να αναβάλει τη λειτουργία και να ανασχεδιάσει την ασφάλειά της. Με το Copilot Vision and Actions, η Microsoft δεν ρισκάρει.
Η εταιρεία έχει δημοσιεύσει ένα σαφές σύνολο δεσμεύσεων ασφαλείας, τονίζοντας ότι αυτές οι ισχυρές εμπειρίες πρακτόρων εισάγονται με υπευθυνότητα.
Κυρίως, το Copilot Actions είναι απενεργοποιημένο από προεπιλογή. Οι χρήστες πρέπει να επιλέξουν ρητά να το ενεργοποιήσουν και μπορούν να το κάνουν παύση, να το πάρουν τον έλεγχο ή να το απενεργοποιήσουν ανά πάσα στιγμή.
Η Microsoft υπόσχεται επίσης πλήρη ορατότητα, επιτρέποντας στους χρήστες να παρακολουθούν την πρόοδο του πράκτορα και να ελέγχουν κάθε βήμα που κάνει. Για ευαίσθητες αποφάσεις, ο πράκτορας μπορεί ακόμη και να ζητήσει συγκεκριμένη έγκριση πριν προχωρήσει.
Αυτή η απομάκρυνση από την παθητική συλλογή δεδομένων του Recall είναι κρίσιμη για την οικοδόμηση εμπιστοσύνης των χρηστών. Το νέο μοντέλο για το Copilot Actions έχει σχεδιαστεί για να διασφαλίζει ότι ο χρήστης έχει πάντα τον έλεγχο, σε πλήρη αντίθεση με την αρχική πάντα συνεχή προσέγγιση του Recall. Αυτή η προσεκτική διάθεση πρώτης προεπισκόπησης έχει σχεδιαστεί για τη συλλογή σχολίων και τη βελτίωση των ελέγχων ασφαλείας πριν από μια ευρύτερη κυκλοφορία.
Τελικά, η Microsoft τοποθετεί τον υπολογιστή AI της ως αξιόπιστο συνεργάτη. Όπως δήλωσε ο Mehdi,”θέλουμε κάθε άτομο που κάνει την κίνηση να βιώσει τι σημαίνει να έχεις έναν υπολογιστή που δεν είναι απλώς ένα εργαλείο, αλλά ένας αληθινός συνεργάτης.”
Η επιτυχία αυτού του φιλόδοξου οράματος θα εξαρτηθεί όχι μόνο από την ικανότητα της τεχνολογίας αλλά από την ικανότητα της εταιρείας να πείσει τους χρήστες ότι τα ισχυρά νέα εργαλεία τεχνητής νοημοσύνης της είναι ασφαλές και ασφαλές περιεχόμενο.