Copilot в Windows 11 теперь видит ваш экран — возможно, пора скрыть некоторые вкладки

Программа Copilot для Windows 11 получила новую функцию — Copilot Vision, которая позволяет чат-боту видеть и взаимодействовать с тем, что есть на вашем экране и в ОС.

Функция уже была доступна в Microsoft Edge, а теперь ее можно протестировать и на ноутбуках и ПК с Windows 11. Все разрешения для чат-бота контролирует пользователь — то есть вы можете выбрать, какое именно приложение Copilot Vision сможет просмотреть, чтобы оказать вам помощь.

В демонстрации на 50-летии Microsoft чат-бот взаимодействовал с Minecraft и доложил пользователю, какая броня доступна и для чего она нужна, далее Copilot обратил внимание на овощи в игре, объяснив, как их можно собрать.

Подобным образом чат-бот может работать с программами для монтажа или редактирования фото, подсказывая не продвинутым пользователям, что и где можно нажать для необходимого результата.

Дополнительно Microsoft запустила тест с поиском файлов для Copilot в Windows — сейчас он может искать файлы в форматах.docx, .xlsx, .pptx, .txt, .pdf, .json.

Для обеих этих функций нужна только программа Copilot в Windows, а не полноценный ПК Copilot Plus, однако обновление пока доступно в бете только для жителей США — остальные получат функцию Copilot Vision «в ближайшие недели или месяцы».