Microsoft tillkännagav förbättringar av copilot i en blogginlägg Idag, inklusive en ny visionfunktion som gör det möjligt för AI -assistenten att se och interagera med användarnas Windows -skärmar i realtid.
Som en del av Microsofts 50 -årsjubileum tillkännagav det en enorm förbättring av Copilot, vilket gör den mer personlig och vägledande användare genom uppgifter vid varje steg. Microsoft introducerade Vision i Copilot för webben förra året, men tillkännagivandet är nu för Windows och Mobile. Du kan använda den ursprungliga Windows -appen för att använda copilot när du arbetar över olika appar, filer och webbläsarflikar. Vision i Copilot kommer att läsa din skärm och interagera med den.
Du kan använda copilot för att söka, organisera filer, ändra inställningar och arbeta tillsammans på projekt utan att ständigt byta appar eller filer. Du kan komma åt Copilot -appen genom att trycka på Alt + Space eller genom att trycka på Alt + Space i två sekunder för röstkommandon. Microsoft säger att den ursprungliga Copilot -appen är tillgänglig idag, men Vision -funktionen kommer att nå Windows Insider -programmet först nästa vecka för framtida testning. Programvarujätten nämnde inte ett specifikt allmänt släppdatum, så vi kan bara vänta.
Under en demo visade Microsoft hur Copilot lade till en andra markör för att vägleda användare genom att markera de knappar de behövde för att klicka. I Photoshop påpekade till exempel Copilot Vision specifika verktyg och de steg som användaren behövde följa nästa. Visionfunktionen använde röstinstruktioner och visuella ledtrådar för att ge en mer interaktiv upplevelse, som är ett gigantiskt språng framåt.
Medan Vision kan underlätta att interagera med din Windows -dator, kan det ge en AI -assistent åtkomst till allt på din skärm. Men Microsoft sa att sessionerna är helt opt-in och flyktiga. Microsoft hävdar att Copilot Vision inte sparar eller använder något som den interagerar med. Microsoft säger också att Copilot Vision kan svara på frågor om vad som finns på din skärm och ger ett exempel genom att säga: ”Föreställ dig att du försöker tillhandahålla en ny lägenhet, Copilot Vision kan hjälpa dig att söka efter möbler, hitta rätt färgpalett, tänka igenom dina alternativ på allt från mattor till kast och till och med föreslå sätt att ordna det du tittar på.”
