Copilot Vision может сканировать все на экране

Microsoft выпускает обновление Copilot Vision для участников программы предварительной оценки Windows, которое позволяет искусственному интеллекту видеть всё, что происходит на экране. Ранее этот инструмент мог посмотреть два приложения одновременно и соединять точки между ними, но с этим изменением он может видеть весь рабочий стол или «любое конкретное окно браузера или приложения», утверждает Microsoft.

В отличие от Recall, который может автоматически делать регулярные снимки того, что происходит на экране вашего компьютера, использование Copilot Vision больше похоже на демонстрацию экрана во время видеозвонка: вы можете активировать функцию, нажав на значок очков в приложении Copilot и выбрав рабочий стол, который хотите просмотреть.

По данным Microsoft, Copilot Vision может «помогать анализировать контент, предоставлять ценную информацию и отвечать на ваши вопросы, давая советы вслух». «Получите советы о том, как улучшить свой творческий проект, как улучшить резюме или как освоить новую игру».

Microsoft начала тестировать Copilot Vision ещё в прошлом году как функцию, которая позволяет видеть, что вы смотрите, когда просматриваете веб-страницы в Edge. Copilot Vision также может отвечать на вопросы о том, что видит камера вашего мобильного телефона.