5 funktioner Windows 11's AI Copilot skal virkelig være nyttig

AI er blevet en stor del af Microsofts strategi i løbet af det sidste års tid. Selvfølgelig kan det siges for mange virksomheder, da AI ser ud til at være det hotteste buzzword lige nu. Men Microsoft tog for nylig det dristige skridt at bringe det til Windows 11 i form af Windows Copilot, en ny AI-assistent, der (uofficielt) er en efterfølger til Cortana. Det er drevet af den store GPT-4-sprogmodel, der bruges n Bing Chat til at skabe et værktøj, der håber at være mere nyttigt end nogensinde.

Selvom potentialet er spændende, er den nuværende implementering af Copilot i Windows Insider builds meget grundlæggende og ikke så forskellig fra blot at bruge Bing Chat på nettet. Jeg har et par ideer til, hvad Microsoft kan gøre for at gøre Copilot til en virkelig vigtig del af Windows 11.

1 Support alle systemindstillinger og hovedfunktioner

Det store træk ved Windows Copilot ved lanceringen var, at det kunne interagere med din pc på måder, som Bing Chat, som blot en browser, virkelig ikke kunne. Og dette er et godt udgangspunkt. Mange superbrugere kan allerede godt lide at bruge tekstbaserede grænseflader og tastaturkommandoer til at udføre bestemte opgaver, så at kunne ændre mange af disse indstillinger fra ét sted har et stort potentiale.

Den nuværende implementering understøtter dog kun nogle få funktioner, som at kunne skifte til lys eller mørk tilstand, slå forstyr ikke til eller tage et skærmbillede. Dette skal virkelig udvides til alle de Windows-indstillinger, der kan findes i Indstillinger-appen (Kontrolpanelet skal nok blive efterladt på dette tidspunkt), eller i hvert fald meget mere end det, vi har lige nu. Det kunne ændre accentfarven, deaktivere en af ​​skærmene i en multi-monitor opsætning, ændre afspilningsenheder og så videre. Det kunne endda starte en fokussession.

Hvis Windows Copilot kunne hjælpe med alt dette, kunne det gøre interaktion med visse indstillinger meget hurtigere, især for folk, der gør det ofte. Der er meget, der kan gøres, og Microsoft har lovet noget af det, men det har ikke leveret endnu.

2 Nem app hooks

En anden ting, jeg føler, vil gøre eller ødelægge Copilots brugbarhed, er dens integration med andre apps. I ånden af ​​at blive en centraliseret AI-assistent skal Copilot let kunne integreres med alle slags tredjepartsapps. Vi så dette i aktion, da Microsoft demonstrerede Copilot kl årets Build og brugte den til at afspille musik med Spotify. Men det har vi ikke set blive funktionelt endnu, og det skal gå ud over Microsofts sædvanlige partnere.

Copilot bør være i stand til at åbne apps og starte en specifik opgave i dem, eller afspille et specifikt show på Netflix eller noget andet, der kan være nyttigt i disse apps.

3 Integration med File Explorer

Jeg ved, at folk sikkert er trætte af, at Microsoft skohorner uønskede tjenester, hvor end det kan, men jeg tror, ​​at det kan gøre det, hvis man har Copilot-integration i File Explorer nyttigt for mere end blot brugere, der ønsker at skrive instruktioner i Copilot, især fordi det kræver, at Copilot-vinduet næsten optager plads på din skærm permanent.

Det kunne være interessant at have en funktion i File Explorer, hvor du kan højreklikke på en fil og vælge en mulighed kaldet "Send til Copilot", som derefter ville bede den om at spørge, hvad du vil gøre med det nævnte fil. For eksempel kan du med et billede bede Copilot om at fjerne baggrunden, eller du kan bede den om at transskribere en lydfil. Disse er begge funktioner, vi har set vist frem, men det vil normalt kræve, at du trækker og slipper filen i Copilot-panelet. Jeg tror, ​​at det ville være velkomment at få adgang til det direkte fra File Explorer (men muligheden for at slå det fra ville også være rart).

4 Stemmekontrol

Jeg formoder, at jeg er alene om denne, og derfor har jeg skubbet denne lidt ned. Stemmekommandoer er tydeligvis mere populære på telefoner, og lige nu understøtter Bing Chat kun denne funktion, hvis du er på din telefon. Men jeg synes, det ville være rart at have stemmekommandoer understøttet bærbare computere og pc'er også. Det kan være nyttigt at kunne ændre alle disse indstillinger, begynde at spille musik eller åbne en app med din stemme. Og det samme gælder for at stille Bing-spørgsmål. Cortana understøttede det, da Windows 11 blev introduceret, og Microsoft ønskede, at det skulle være en stor ting, så jeg er ikke sikker på, om det faktisk ville vinde meget trækkraft, men jeg kan bestemt se anvendelser for det.

Med en browser skal du gå lidt ud af din måde for at starte stemmeinteraktion, men med en indbygget funktion, kan du have et aktiveringsnøgleord eller genvej, så du hurtigt kan tale dit kommandoer. Jeg forestiller mig, at det ikke ville være så svært at implementere, da stemmegenkendelse allerede bruges i flere dele af Windows.

5 Skærmlæsning og OCR

En sidste ting, jeg ville elske at se Copilot være i stand til at gøre, er at læse informationen på skærmen og især optisk tegngenkendelse (OCR). Lige nu kan du bede Copilot om at opsummere en side, men den skal være på en hjemmeside åben i Edge, hvilket i høj grad begrænser funktionaliteten. Selvom den ideelle tilgang ville være at få dette til at fungere sammen med andre browsere, ville det være interessant, hvis Copilot kunne dybest set fungere som en skærmlæser (såsom Oplæser) og bruge den til at udtrække information fra enhver side på enhver browser eller app til opsummere det.

En anden cool funktion ville være OCR eller evnen til at genkende tekst i billeder, så du kan bede Copilot om at hente tekst fra et billede eller en PDF-scanning., og blot kopiere det eller opsummere det. Denne er faktisk ikke så tosset, da det er blevet rapporteret, at der er planlagt en form for OCR-funktion Windows 12, så jeg er sikker på, at vi kunne se noget i denne retning.

Der er mere uudnyttet potentiale

Jeg udforskede mine personlige præferencer og ønsker her, men med noget så dygtigt som Copilot og de store sprogmodeller, der driver det, er jeg sikker på, at der er mange flere ideer, som folk kunne finde nyttige. Uanset hvad er fremtiden for Copilot og Windows ret spændende, forudsat at Microsoft kan leve op til løftet om dette produkt. Hvorvidt det rent faktisk vil ske, er et helt andet spørgsmål.