Microsoft представила масштабное обновление Copilot для Windows 11. Теперь голосовой помощник активируется фразой Hey, Copilot, а также научился анализировать содержимое экрана и выполнять действия от имени пользователя. Компания называет это шагом к превращению каждого ПК в «ИИ ПК».
Представленная ещё год назад функция Copilot Vision позволяет поделиться с нейросетью экраном или отдельным приложением, чтобы она подсказала, как выполнить нужное действие. Например, Copilot Vision подскажет, стоит ли покупать товар, открытый сейчас в браузере, и где он доступен по лучшей цене.
Встроенный агент Copilot Actions даёт возможность автоматически сортировать фото, извлекать данные из PDF и экспортировать текст в документы Office. Агента можно запустить в фоновом режиме и заниматься другими делами.
Microsoft подчёркивает, что выполнение действий от имени пользователя возможно только после получения разрешения. Пользователь контролирует все этапы выполнения задачи: они отображаются на экране в реальном времени. А перед выполнением конфиденциальных действий Copilot Actions запросит дополнительное подтверждение.
В «Проводнике» появился пункт AI Actions для быстрой обработки изображений и документов при помощи партнёрских сервисов: Manus AI сгенерирует веб-сайт в пару действий из хранящихся на компьютере документов, а Filmora поможет с редактированием видео.
Ранее компания также объявила, что к Copilot в Windows теперь можно подключить внешние приложения: OneDrive, Outlook, «Google Диск», Gmail, «Google Календарь» или «Google Контакты». Ассистент сможет использовать данные из этих сервисов: сообщит, когда у вас запланирован визит к стоматологу или напомнит, о чём вам писала коллега в письме на прошлой неделе.
Распространение анонсированных функций начнётся в ближайшие недели через обновление приложения Copilot из Microsoft Store. В России Copilot официально не работает.