ΗMicrosoft ξεκίνησε να δοκιμάζει μια σημαντική αναβάθμιση για την εφαρμογή Copilot στα Windows, προσθέτοντας νέες λειτουργίες που επιτρέπουν την κοινή χρήση της οθόνης ή εφαρμογών με τον AI βοηθό. Η λειτουργίαCopilot Vision, που αρχικά ήταν διαθέσιμη μόνο μέσω του προγράμματος περιήγησης Edge, επεκτείνεται πλέον για χρήση με οποιαδήποτε εφαρμογή στον υπολογιστή.
Με τη νέα δυνατότητα, ο Copilot μπορεί να προσφέρει καθοδήγηση σε πραγματικό χρόνο σε εφαρμογές όπως το Adobe Photoshop ή να αναλύσει εικόνες και ιστοσελίδες που βλέπει ο χρήστης. Ένα πρώιμο demo παρουσιάστηκε στο κοινό στο πάρτι για τα 50 χρόνια της Microsoft, όπου η λειτουργία βοήθησε στη ρύθμιση ενός παιχνιδιού Minecraft και στη βελτιστοποίηση ρυθμίσεων στο Clipchamp, τον video editor της εταιρείας.
Αν και η λειτουργία Copilot Vision είναι σε φάση beta, προς το παρόν είναι διαθέσιμη μόνο για testers στις Ηνωμένες Πολιτείες και η πλήρης δυνατότητα επισήμανσης στοιχείων στην οθόνη δεν έχει ενεργοποιηθεί ακόμα. Παρά την ομοιότητα με τη λειτουργία Recall –που αποθηκεύει στιγμιότυπα οθόνης αυτόματα– το Copilot Vision λειτουργεί περισσότερο σαν screen sharing, παρόμοιο με αυτό που συμβαίνει σε μια κλήση μέσω Microsoft Teams.
Επιπλέον, η Microsoft δοκιμάζει και νέα λειτουργία αναζήτησης αρχείων μέσω του Copilot, που επιτρέπει την εύρεση και ανάγνωση περιεχομένου σε αρχεία .docx, .xlsx, .pptx, .txt, .pdf και .json. Αυτές οι λειτουργίες δεν απαιτούν υπολογιστή με Copilot Plus, μόνο την εγκατάσταση της εφαρμογής Copilot σε Windows. Το Copilot Vision θα είναι επίσης διαθέσιμο σε iOS και Android. Η ευρύτερη διάθεση αναμένεται μέσα στους επόμενους μήνες.