Copilot се научи да вижда, мисли и подсказва: Революция в AI асистентите и мултимодалните способности
Microsoft показа новата функционалност Copilot Vision – уголемение на асистента с изкуствен интелект за Windows, което ви дава опция да споделяте екрана си и съответни приложения, с цел да получите интерактивна помощ. Потребителите към този момент могат да вземем за пример да изискат от Copilot да им изясни по какъв начин да употребяват инструментите в Adobe Photoshop или да проучват изображението или уебстраницата, която преглеждат.
Екипът на Copilot изяснява, че когато е задействана, функционалността може да следи какво вижда потребителят и да води разговор с него в действително време. По създание това е втори взор, който оказва помощ за навигацията, споделя потребни наблюдения и дава отговор на зародили въпроси.
Microsoft стартира да тества Copilot Vision по-рано тази година, а в този момент функционалността е налична гратис за потребителите на Windows 10 и 11 в Съединени американски щати. Тя към този момент не изисква абонамент за Copilot Pro, с цел да се употребява, макар че самата технология към момента е част от пробната разработка на Microsoft под марката Copilot Labs.
Copilot Vision може да бъде задействана посредством приложението Copilot, като докоснете иконата с очилата. След това потребителят избира прозореца на браузъра или приложението, което желае да показа. Механиката е сходна на шерването на екрана в Microsoft Teams, единствено че в по-персонализиран формат. Това е изцяло доброволна функционалност – Copilot Vision няма да работи, в случай че потребителят не позволи достъп. За разлика от функционалността Recall, която прави непрекъснати скрийншоти, тук всичко зависи от съответния избор.
