Microsoft перетворює Windows 11 на «ШІ-комп’ютер»: чи захоче користувач розмовляти зі своїм ПК
- Microsoft активно інтегрує ШІ Copilot у Windows 11, прагнучи створити «ШІ-комп’ютер» і «переписати всю ОС» навколо штучного інтелекту.
- Компанія запроваджує голосове керування за допомогою фрази «Hey, Copilot!», вважаючи голос третім ключовим механізмом введення.
- Нова функція Copilot Vision дозволяє ШІ сканувати вміст екрана (за згодою користувача), щоб надавати допомогу, інструкції та консультації у використанні програм.
- Функція Copilot Actions (поки на етапі тестування у Copilot Labs) дозволить ШІ виконувати завдання на локальному ПК від імені користувача.
- Microsoft просуває ці зміни, припиняючи підтримку Windows 10, і вважає, що вони перетворять ПК на «справжнього партнера».
Корпорація Microsoft активно готується до наступного етапу розвитку операційної системи Windows, яка незабаром відзначить своє 40-річчя, і водночас прощається з Windows 10. Замість того, аби поспішати з анонсом Windows 12, компанія зосередилася на масштабній інтеграції штучного інтелекту у Windows 11, прагнучи перетворити кожен ПК на повноцінний «ШІ-комп’ютер», яким керуватиме помічник Copilot, а користувач зможе з ним розмовляти. Про це пише The Verge.
Юсуф Мехді, виконавчий віцепрезидент і директор зі споживчого маркетингу Microsoft, пояснив, що компанія стоїть на порозі наступної еволюції, де ШІ буде інтегрований у мільйони повсякденних операцій, а не лише функціонуватиме як чатбот. За його словами, головна мета полягає у переписуванні всієї операційної системи навколо штучного інтелекту для створення справжнього «ШІ-комп’ютера».
Microsoft впроваджує нові можливості у Windows 11, що дозволять інтегрувати функції ШІ у звичайні ПК, а не лише у спеціалізовані моделі Copilot Plus. Найбільша зміна, за задумом компанії, полягає в тому, що користувачі почнуть розмовляти зі своїми комп’ютерами, дозволяючи Copilot виконувати дії від їхнього імені.
Юсуф Мехді підкреслює, що ПК має розуміти користувача через голос, а потім виконувати «магію». Він зазначив, що з дозволу користувача помічник зможе бачити та розуміти, що відбувається на екрані, і діяти відповідно. Для реалізації цього Microsoft використовує можливості Copilot Vision та Voice, запускаючи кодове слово активації «Hey, Copilot!» на ПК з Windows 11. У Microsoft вважають, що голос стане третім механізмом введення, який доповнить клавіатуру та мишу, і це буде «досить значним» новим способом взаємодії.

Історія знає приклади подібних спроб — десять років тому Microsoft уже намагалася популяризувати Cortana у Windows 10, а протягом останніх сорока років додавала різноманітні голосові функції для потреб доступності. Проте тепер корпорація переконана, що саме ШІ спровокує зміну поведінки та переконає людей, що розмова з комп’ютером не є чимось дивним.
Мехді стверджує, що наявні дані свідчать про те, що користувачі задоволені використанням голосу. Як приклад він наводить мільярди хвилин, які люди витрачають, спілкуючись під час нарад у Microsoft Teams. Він вважає, що перехід від «розмови через» до «розмови з» комп’ютером стане реальністю, і ця функція «дійсно злетить».
Хоча для сценаріїв, як-от допомога в додатках або підвищення доступності, голос є чудовим рішенням, існує скептицизм щодо того, чи захоче більшість користувачів постійно розмовляти зі своїм ПК. Наприклад, Мехді згадав лікарів, які використовують транскрипцію під час оглядів, а також досвід роботи зі спільнотою користувачів з обмеженими можливостями, який допоміг зробити голосовий доступ та набір тексту дійсно цінними.
Для того, щоб ШІ міг контролювати ПК і виконувати дії від імені користувача, він спершу повинен отримати доступ до вмісту екрана. Microsoft останніми місяцями тестувала функцію Copilot Vision, яка дозволяє помічнику сканувати все, що відображається на дисплеї, щоб надавати консультації щодо використання програм, відповідати на питання про фотографії чи документи, або ж допомагати у вирішенні проблем.
Функція Copilot Vision зараз глобально розгортається на всіх ринках, де доступний Copilot. Вона дозволить отримувати покрокові інструкції в іграх, допомогу у використанні програм, а також підказки з усунення несправностей ПК. Важливо, що Copilot Vision є функцією за згодою користувача, що відрізняє її від Recall, яка автоматично створює знімки екрана. У цьому випадку користувач фактично «транслює» вміст свого екрана помічнику, подібно до того, як це відбувається під час дзвінка в Teams.
Наступним кроком після візуального сприйняття є Copilot Actions, що дозволяє ШІ-помічнику виконувати дії на локальному комп’ютері, наприклад, редагувати папку з фотографіями. Наразі Microsoft розпочинає тестування цих дій у рамках програми попереднього перегляду, обмежуючи їх вузьким набором сценаріїв, поки відбувається оптимізація моделі ШІ.
Навджот Вірк, віцепрезидент корпорації з питань Windows Experiences, пояснив, що спочатку «агент може робити помилки або стикатися з труднощами» при роботі зі складними програмами. Цей факт викликає певний сумнів, тому Microsoft поки що обмежує функціонал у Copilot Labs. Вірк запевнив, що компанія прагне «постійно вдосконалювати досвід», навчаючись на тому, як люди користуються цими інструментами.
Copilot Actions запускається в окремому, «безпечному та ізольованому середовищі» на робочому столі Windows. Користувач може дозволити ШІ-агенту виконувати завдання у фоновому режимі, поки він займається чимось іншим, спостерігаючи за переліком кроків, які виконує помічник.
Microsoft також інтегрує Copilot у панель завдань Windows, забезпечуючи доступ до нових функцій Vision та Voice одним натисканням. Крім того, компанія пропонує новий інтегрований пошук, який пришвидшує знаходження локальних файлів, програм і налаштувань.
Попри торішній скандал із функцією Recall, компанія не відмовляється від своїх планів. Microsoft, яка активно просуває Windows 11 на фоні припинення підтримки Windows 10, готує телевізійну рекламу цих нових ШІ-можливостей під гаслом «Зустрічайте комп’ютер, з яким можна розмовляти». За словами Мехді, компанія прагне, щоб «кожна людина, яка переходить, відчула, що таке мати ПК, який є не просто інструментом, а справжнім партнером».