5 функцій Windows 11 AI Copilot має бути справді корисним

За останній рік чи близько того ШІ став важливою частиною стратегії Microsoft. Звичайно, це можна сказати про багато компаній, оскільки штучний інтелект зараз є найпопулярнішим модним словом. Але Microsoft нещодавно зробила сміливий крок, довівши це Windows 11 у вигляді Windows Copilot, новий помічник ШІ, який (неофіційно) є наступником Cortana. Він працює на базі великої мовної моделі GPT-4, яка використовує n Bing Chat для створення інструменту, який сподівається бути кориснішим, ніж будь-коли.

Хоча потенціал захоплюючий, поточна реалізація Copilot у збірках Windows Insider дуже проста і не надто відрізняється від простого використання Чат Bing в Інтернеті. У мене є кілька ідей щодо того, що може зробити Microsoft, щоб зробити Copilot справді важливою частиною Windows 11.

1 Підтримка все налаштування системи та основні функції

Головною перевагою Windows Copilot на момент запуску було те, що він міг взаємодіяти з вашим ПК так, як Bing Chat, як просто браузер, насправді не міг. І це чудова відправна точка. Багато досвідчених користувачів уже люблять використовувати текстові інтерфейси та команди з клавіатури для виконання певних завдань, тому можливість змінювати багато цих налаштувань з одного місця має великий потенціал.

Однак поточна реалізація підтримує лише кілька функцій, як-от можливість переходити в світлий або темний режими, увімкнути режим «Не турбувати» або зробити знімок екрана. Це справді потрібно розширити все параметри Windows, які можна знайти в програмі «Параметри» (на цьому етапі, ймовірно, слід залишити панель керування), або принаймні набагато більше, ніж те, що ми маємо зараз. Це може змінити колір акценту, вимкнути один із дисплеїв у налаштуваннях із кількома моніторами, змінити пристрої відтворення тощо. Це може навіть почати фокус-сесію.

Якби Windows Copilot міг допомогти з усім цим, він міг би значно пришвидшити взаємодію з певними налаштуваннями, особливо для людей, які роблять це часто. Можна багато чого зробити, і Microsoft пообіцяла дещо з цього, але це ще не виконано.

2 Прості гачки додатків

Ще одна річ, яка, на мою думку, зробить або порушить корисність Copilot — це його інтеграція з іншими програмами. Щоб стати централізованим помічником зі штучним інтелектом, Copilot повинен мати можливість легко інтегруватися з усіма видами програм сторонніх розробників. Ми побачили це в дії, коли Microsoft демонструвала Copilot на цього року Build і використовував його для відтворення музики за допомогою Spotify. Але ми ще не бачили, як це стало функціональним, і воно має вийти за межі звичайних партнерів Microsoft.

Copilot повинен мати можливість відкривати програми та запускати певне завдання в них, відтворювати певне шоу на Netflix або щось інше, що може бути корисним у цих програмах.

3 Інтеграція з Провідником файлів

Я знаю, що людям, напевно, набридло від того, що корпорація Майкрософт використовує небажані служби всюди, де тільки може, але я думаю, що інтеграція Copilot у Провідник файлів може це зробити корисно не тільки для користувачів, які хочуть вводити інструкції в Copilot, особливо тому, що для цього потрібно, щоб вікно Copilot майже займало місце на екрані постійно.

Було б цікаво мати функцію у Провіднику файлів, за допомогою якої ви можете клацнути файл правою кнопкою миші та вибрати опція під назвою «Надіслати другому пілоту», яка потім запропонує йому запитати, що ви хочете зробити з цим файл. Наприклад, із зображенням ви можете попросити Copilot видалити фон або ви можете попросити його транскрибувати аудіофайл. Ці обидві можливості ми бачили на демонстрації, але для цього зазвичай потрібно перетягнути файл на панель Copilot. Я думаю, що можливість отримати доступ до нього безпосередньо з Провідника файлів буде вітатися (але можливість вимкнути його також буде непоганою).

4 Голосове керування

Я підозрюю, що в цьому я один, тому я трохи зменшив його. Голосові команди, очевидно, більш популярні на телефонах, і зараз Bing Chat підтримує цю функцію, лише якщо ви використовуєте свій телефон. Але я думаю, що було б непогано підтримувати голосові команди ноутбуки і ПК теж. Можливість змінити всі ці налаштування, почати відтворювати музику або відкрити програму за допомогою голосу може бути корисною. І те саме стосується запитань Bing. Кортана справді підтримувала її, коли була представлена ​​Windows 11, і Microsoft хотіла, щоб це було великою справою, тому я не впевнений, чи справді вона набуде великої популярності, але я точно бачу для неї застосування.

З браузером вам доведеться трохи постаратися, щоб ініціювати голосову взаємодію, але з a вбудовану функцію, ви можете мати ключове слово активації або ярлик, щоб ви могли швидко промовити свій команди. Я думаю, що це було б не так важко реалізувати, оскільки розпізнавання голосу вже використовується в багатьох частинах Windows.

5 Читання з екрана та OCR

І останнє, що я хотів би побачити, щоб Copilot міг робити, це читати інформацію на екрані та, особливо, оптичне розпізнавання символів (OCR). Прямо зараз ви можете попросити Copilot підсумувати сторінку, але вона має бути на веб-сайті, відкритому в Edge, що значно обмежує функціональність. Хоча ідеальним підходом було б, щоб ця функція працювала з іншими браузерами, але було б цікаво, якби Copilot міг в основному діяти як програма зчитування екрана (наприклад, Екранний диктор) і використовувати її для отримання інформації з будь-якої сторінки в будь-якому веб-переглядачі чи програмі для підсумуйте це.

Іншою цікавою функцією було б оптичне розпізнавання символів, тобто можливість розпізнавати текст на зображеннях, тож ви можете попросити Copilot взяти текст із зображення чи сканованого PDF-файлу та просто скопіювати його чи узагальнити. Це насправді не так божевільний, оскільки було повідомлено, що планується якась функція OCR Windows 12, тому я впевнений, що ми могли б побачити щось у цьому плані.

Є ще невикористаний потенціал

Я досліджував тут свої особисті вподобання та побажання, але з такими можливостями, як Copilot, і великими мовними моделями, які його забезпечують, я впевнений, що є набагато більше ідей, які можуть бути корисними людям. Незважаючи на це, майбутнє Copilot і Windows є досить захоплюючим, якщо припустити, що Microsoft зможе виконати обіцянку цього продукту. Зовсім інше питання, чи станеться це насправді.