Windows 11: Компьютер, который понимает вас с полуслова

Microsoft заявила о будущем обновлении Windows 11, которое превратит ваш компьютер в настоящего помощника, управляемого голосом и искусственным интеллектом. Представьте, вы сможете просто говорить своему ПК, что нужно сделать, и он будет выполнять это без единого касания клавиатуры или мыши.

В последние дни Microsoft намекала на это в социальных сетях, обещая пользователям "отпуск для рук". Компания ссылается на концепцию Windows 2030 Vision, где традиционные методы управления уходят в прошлое.

И хотя до 2030 года еще далеко, Microsoft уже делает серьезные шаги в этом направлении, заявляя, что "вы можете разговаривать" со своей Windows 11.

Windows 11 становится "умнее" с каждой командой

Встречайте новую функцию Copilot Actions – возможно, самое мощное нововведение, которое кардинально изменит наше взаимодействие с Windows.

Copilot Actions – не совсем новая функция. Microsoft анонсировала её еще в мае, но изначально она была доступна только в веб-версии Copilot. Даже тогда она умела делать заказы, покупать билеты и заказывать товары через интегрированные онлайн-сервисы.

Всего за 5 месяцев Copilot Actions интегрировалась в Windows 11, превратив её в систему, где искусственный интеллект действует по вашей указке.

Что такое "умная" операционная система?

Представьте себе операционную систему, которая не просто выполняет команды, а понимает ваши намерения и координирует работу AI-агентов. Эти агенты могут "думать", планировать и выполнять задачи от вашего имени. Операционная система становится платформой, предоставляющей AI-агентам доступ к нужным приложениям и сервисам.

Microsoft реализует это через открытый стандарт Model Context Protocol (MCP), представленный Anthropic в ноябре 2024 года.

Этот протокол позволяет AI-агентам в Windows 11 безопасно находить, запускать и планировать задачи в обычных приложениях, давая им возможность редактировать файлы, запускать пользовательские сценарии и взаимодействовать с системными функциями без привычного управления мышью и клавиатурой.

Copilot Actions – это основной AI-агент Microsoft для Windows 11, но по умолчанию он отключен. После официального запуска функции, вам нужно будет активировать "Experimental agentic features" в настройках Copilot.

Microsoft ставит перед собой три главные цели для AI-ПК с Windows:

1. Естественное взаимодействие: Общайтесь с компьютером голосом или текстом, как с живым человеком, благодаря Copilot Voice.
2. Визуальная поддержка: Компьютер "видит" то же, что и вы, и помогает вам в любой задаче с помощью Copilot Vision.
3. Автоматизация задач: Позвольте компьютеру выполнять задачи и обрабатывать рабочие процессы от вашего имени через Copilot Actions.

Как Windows 11 становится вашим личным ассистентом?

Все начинается с фразы "Hey Copilot" – это команда активации Copilot Voice, которую можно включить в настройках. Мы уже привыкли к "Hey Google" и "Hey Siri", но теперь, помимо ответов на вопросы, Microsoft предлагает нам делегировать компьютеру выполнение конкретных задач.

После активации Copilot Voice слушает вас, понимает ваши слова и, если верить рекламной кампании Microsoft "Meet the Computer You Can Talk To", может запускать приложения, изменять файлы и выполнять другие действия.

Вам достаточно описать задачу простым языком. Copilot Voice разделит её на конкретные инструкции и, при необходимости, использует Copilot Vision, чтобы понять, что происходит на экране, получить доступ к файлам и взаимодействовать с приложениями через Copilot Actions. Copilot Connectors позволяет подключаться к облачным сервисам, таким как Google Calendar и OneDrive.

Предположим, у вас открыт сайт с вашим портфолио. Ваша задача – написать небольшое резюме на основе этого портфолио, чтобы отправить его потенциальному клиенту. Просто скажите: "Hey Copilot, помоги мне составить резюме на основе моего портфолио". Copilot Voice поймет вашу просьбу, Copilot Vision проанализирует ваш сайт, соберет необходимую информацию, а Copilot Actions откроет Word и автоматически напечатает текст резюме. При необходимости он также возьмет дополнительную информацию из вашего Google Drive с помощью Connectors.

И самое главное – новый файл Word с вашим резюме будет создан только с помощью вашего голоса, без использования клавиатуры или мыши. Это и есть "умная" операционная система в действии, максимально приближенная к концепции Jarvis из фильмов о Железном Человеке.

После завершения задачи Copilot автоматически закроется через несколько секунд бездействия, или вы можете просто сказать "Goodbye". Если вы хотите вернуться к привычному управлению, вы всегда можете использовать мышь, чтобы закрыть окно.

Пока Copilot Actions выполняет задачу, вы можете заниматься другими делами на компьютере. Все AI-агенты в Windows 11 имеют свою собственную среду, и вы в любой момент можете взять управление на себя.

Насколько безопасен "умный" режим в Windows 11?

Как и во всем, что связано с искусственным интеллектом, вопросы конфиденциальности и безопасности вызывают опасения. Ведь вы, по сути, даете программе полный доступ к вашим файлам, рабочему столу и всему, что происходит на экране.

Microsoft уверяет, что подходит к этому вопросу с максимальной осторожностью. Компания заявляет, что у пользователей будет полный контроль над действиями Copilot Actions, включая возможность приостановить или отключить его в любой момент.

Анонсированные функции пока находятся на стадии внутреннего тестирования и будут постепенно внедряться в предварительные версии Windows.

Будут ли Copilot Actions доступны на всех компьютерах с Windows 11?

В блоге Microsoft, посвященном Copilot Actions, говорится о "превращении каждого ПК с Windows 11 в AI-ПК". Нигде не упоминается, что Copilot Voice, Vision или Actions будут ограничены только Copilot+ PC.

Это может показаться удивительным, ведь некоторые задачи, показанные в демонстрационных видео, могут быть ресурсоемкими для старых компьютеров.

Однако, для современных устройств с NPU (нейронным процессором) мощностью не менее 40 TOPS это не должно составить труда. Microsoft, похоже, решила не делать акцент на Copilot+ PC в этот раз, и это может быть к лучшему. В любом случае, компания явно стремится к тому, чтобы Copilot Voice стал естественной частью нашего взаимодействия с компьютером.

На данный момент функция Hey Copilot уже доступна всем пользователям, а Copilot Vision находится в процессе глобального развертывания. Остальные функции скоро станут доступны участникам программы Windows Insider.

Мнение редакции MSReview: Превращение Windows 11 в "умную" операционную систему с помощью AI Copilot Actions - это смелый и многообещающий шаг. Интеграция голосового управления и искусственного интеллекта для автоматизации задач может значительно упростить взаимодействие пользователей с ПК. Однако вопросы безопасности и конфиденциальности данных, а также требования к аппаратному обеспечению, остаются важными аспектами, которые Microsoft необходимо тщательно продумать и реализовать для обеспечения доверия и удовлетворенности пользователей.