Microsoft ha introdotto Copilot Vision, una funzione sperimentale che consente al suo assistente AI di navigare in internet insieme agli utenti su Microsoft Edge, offrendo approfondimenti e assistenza in tempo reale basati sul contenuto visualizzato. Secondo quanto riportato da Windows Central, questa nuova funzionalità permette agli utenti di interagire con Copilot tramite comandi vocali, ponendo domande sia su testi che su immagini presenti nelle pagine web, mentre si sottolineano le misure di privacy e la disponibilità iniziale limitata.
Copilot Vision rappresenta un significativo passo avanti nelle capacità di navigazione assistita da AI di Microsoft, integrandosi perfettamente con il browser Edge per fornire assistenza contestuale in tempo reale. Questa funzione consente a Copilot di comprendere e analizzare il contenuto delle pagine web, inclusi testi e immagini, permettendo agli utenti di fare domande e ricevere risposte pertinenti a ciò che stanno visualizzando. A differenza dei chatbot tradizionali, Copilot Vision si propone come un compagno esperto, offrendo suggerimenti, spiegazioni e opinioni su vari argomenti mentre gli utenti navigano in internet.
Gli utenti possono interagire con Copilot Vision attraverso conversazioni in linguaggio naturale, ricevendo consigli o suggerimenti in tempo reale. La funzione supporta input vocali, consentendo un’interazione fluida durante la navigazione. Copilot Vision può assistere in vari compiti, come fornire consigli per acquisti o aiutare a trovare informazioni sui siti web. Sebbene non possa interagire direttamente con gli elementi web, può guidare gli utenti su dove cliccare se hanno difficoltà a localizzare qualcosa su una pagina.
Copilot Vision è una funzione opt-in che richiede un permesso esplicito per essere attivata. Microsoft sottolinea che nessun dato elaborato dalla funzione viene memorizzato oltre la sessione attiva o utilizzato per l’addestramento dell’AI. Per proteggere ulteriormente le informazioni sensibili, Copilot Vision funziona solo su un elenco curato di siti web popolari ed è vietato operare su contenuti a pagamento o sensibili.
Attualmente, Copilot Vision è disponibile come funzione sperimentale per alcuni abbonati a Copilot Pro negli Stati Uniti attraverso il programma Copilot Labs. Microsoft adotta un approccio cauto al lancio, limitando l’accesso iniziale per garantire test adeguati e affinare la tecnologia in base ai feedback degli utenti. La funzione è accessibile esclusivamente nel browser Microsoft Edge; gli utenti devono digitare “@copilot” nella barra degli indirizzi per attivarla.