Copilot Vision от Microsoft получил доступ ко всему экрану пользователя

Microsoft начала распространять обновление Copilot Vision для участников программы Windows Insider. Теперь ИИ сможет «видеть» весь экран пользователя. Ранее его возможности ограничивались просмотром только двух приложений одновременно и сопоставлением данных между ними. С обновлением Copilot Vision сможет анализировать весь рабочий стол или отдельное окно браузера или программы.

В отличие от функции Recall, которая автоматически делает регулярные снимки экрана, Copilot Vision работает больше как демонстрация экрана в видеозвонке. Пользователь вручную включает функцию, нажав на иконку в виде очков в приложении Copilot и выбрав, что именно показать ИИ.

По словам Microsoft, Copilot Vision может «помогать анализировать содержимое, давать рекомендации и отвечать на ваши вопросы, озвучивая подсказки вслух».

Например, вы можете получить советы по улучшению творческого проекта, помощи в редактировании резюме или навигации в новой игре.

Изначально Copilot Vision начали тестировать в прошлом году как функцию, которая помогает ИИ видеть, что вы просматриваете в браузере Edge. Также ИИ может отвечать на вопросы о том, что «видит» через камеру смартфона.