5 functies De AI Copilot van Windows 11 moet echt nuttig zijn

Copilot zou een opwindende toevoeging aan Windows 11 kunnen zijn, maar als Microsoft wil dat het waardevol is, heeft het deze mogelijkheden nodig.

Snelle links

  • Ondersteuning van alle systeeminstellingen en belangrijke functies
  • Eenvoudige app-haken
  • Integratie met Verkenner
  • Spraakbesturing
  • Schermlezen en OCR

AI is het afgelopen jaar een groot deel van de strategie van Microsoft geworden. Natuurlijk kan dat voor veel bedrijven worden gezegd, aangezien AI op dit moment het populairste modewoord lijkt te zijn. Maar Microsoft nam onlangs de gewaagde stap om het naar Windows 11 in de vorm van Windows copiloot, een nieuwe AI-assistent die (onofficieel) een opvolger is van Cortana. Het wordt mogelijk gemaakt door het GPT-4 grote taalmodel dat in Bing Chat wordt gebruikt om een ​​tool te maken die hoopt nuttiger te zijn dan ooit.

Hoewel het potentieel opwindend is, is de huidige implementatie van Copilot in Windows Insider-builds erg eenvoudig en niet veel anders dan alleen het gebruik van Bing Chat op internet. Ik heb een paar ideeën voor wat Microsoft kan doen om van Copilot een echt essentieel onderdeel van Windows 11 te maken.

1 Steun alle systeeminstellingen en belangrijke functies

De grote aantrekkingskracht van Windows Copilot bij de lancering was dat het met je pc kon communiceren op een manier die Bing Chat, als gewone browser, echt niet kon. En dit is een prima uitgangspunt. Veel hoofdgebruikers gebruiken al graag op tekst gebaseerde interfaces en toetsenbordopdrachten om bepaalde taken uit te voeren, dus het heeft veel potentieel om veel van deze instellingen vanaf één plek te kunnen wijzigen.

De huidige implementatie ondersteunt echter slechts enkele functies, zoals de mogelijkheid om over te schakelen naar de lichte of donkere modus, niet storen in te schakelen of een screenshot te maken. Dit moet echt uitgebreid worden alle de Windows-instellingen die te vinden zijn in de app Instellingen (het Configuratiescherm zou op dit punt waarschijnlijk moeten worden achtergelaten), of in ieder geval veel meer dan wat we nu hebben. Het kan de accentkleur veranderen, een van de beeldschermen uitschakelen in een opstelling met meerdere monitoren, afspeelapparaten wijzigen, enzovoort. Het zou zelfs een focussessie kunnen starten.

Als Windows Copilot hierbij zou kunnen helpen, zou het de interactie met bepaalde instellingen een stuk sneller kunnen maken, vooral voor mensen die dat vaak doen. Er is genoeg dat kan worden gedaan, en Microsoft heeft er iets van beloofd, maar het heeft nog niet geleverd.

2 Eenvoudige app-haken

Een ander ding waarvan ik denk dat het het nut van Copilot zal maken of breken, is de integratie met andere apps. Om een ​​gecentraliseerde AI-assistent te worden, moet Copilot eenvoudig kunnen worden geïntegreerd met allerlei soorten apps van derden. We zagen dit min of meer in actie toen Microsoft Copilot demonstreerde op de Build van dit jaar en gebruikte het om muziek af te spelen met Spotify. Maar we hebben dat nog niet functioneel zien worden en het moet verder gaan dan de gebruikelijke partners van Microsoft.

Copilot zou in staat moeten zijn om apps te openen en een specifieke taak erin te starten, of een specifieke show op Netflix af te spelen, of iets anders dat nuttig zou kunnen zijn in deze apps.

3 Integratie met Verkenner

Ik weet dat mensen het waarschijnlijk beu zijn dat Microsoft overal waar mogelijk ongewenste services opslokt, maar ik denk dat Copilot-integratie in File Explorer het zou kunnen redden handig voor meer dan alleen gebruikers die instructies in Copilot willen typen, vooral omdat daarvoor het Copilot-venster bijna ruimte op uw scherm moet innemen permanent.

Het zou interessant kunnen zijn om een ​​functie in Verkenner te hebben waar u met de rechtermuisknop op een bestand kunt klikken en kiezen een optie genaamd "Send to Copilot", die hem vervolgens zou vragen wat je ermee wilt doen bestand. Bij een afbeelding kunt u Copilot bijvoorbeeld vragen de achtergrond te verwijderen, of u kunt Copilot vragen een audiobestand te transcriberen. Dit zijn beide mogelijkheden die we hebben gezien, maar daarvoor zou u het bestand meestal naar het Copilot-paneel moeten slepen en neerzetten. Ik denk dat het welkom zou zijn om er rechtstreeks vanuit Verkenner toegang toe te hebben (maar de optie om het uit te schakelen zou ook leuk zijn).

4 Spraakbesturing

Ik vermoed dat ik hierin de enige ben, daarom heb ik deze wat naar beneden geduwd. Spraakopdrachten zijn natuurlijk populairder op telefoons, en op dit moment ondersteunt Bing Chat deze functie alleen als je op je telefoon zit. Maar ik denk dat het leuk zou zijn om spraakopdrachten te ondersteunen laptops en pc's ook. Het kan handig zijn om al deze instellingen te kunnen wijzigen, muziek af te spelen of een app te openen met je stem. En hetzelfde geldt voor het stellen van Bing-vragen. Cortana ondersteunde het toen Windows 11 werd geïntroduceerd, en Microsoft wilde dat dit iets groots zou worden, dus ik weet niet zeker of het echt veel grip zou krijgen, maar ik zie er zeker toepassingen voor.

Met een browser moet je een beetje uit de weg gaan om spraakinteractie op gang te brengen, maar met een ingebouwde functie, zou u een activeringssleutelwoord of snelkoppeling kunnen hebben, zodat u snel uw kunt spreken commando's. Ik kan me voorstellen dat het niet zo moeilijk zou zijn om te implementeren, aangezien spraakherkenning al in meerdere delen van Windows wordt gebruikt.

5 Schermlezen en OCR

Een laatste ding dat ik graag zou zien dat Copilot zou kunnen doen, is de informatie op het scherm lezen en vooral optische tekenherkenning (OCR). Op dit moment kunt u Copilot vragen een pagina samen te vatten, maar deze moet op een website staan ​​die is geopend in Edge, wat de functionaliteit ernstig beperkt. Hoewel de ideale aanpak zou zijn om dit standaard met andere browsers te laten werken, zou het interessant zijn als Copilot dat zou kunnen fungeren in feite als een schermlezer (zoals Verteller) en gebruiken dat om informatie van elke pagina in elke browser of app te extraheren vat het samen.

Een andere coole functie zou OCR zijn, of de mogelijkheid om tekst in afbeeldingen te herkennen, dus je zou Copilot kunnen vragen om tekst uit een afbeelding of een PDF-scan te halen en deze eenvoudig te kopiëren of samen te vatten. Deze is eigenlijk niet zo gek, aangezien er is gemeld dat er een soort OCR-mogelijkheid is gepland Windows 12, dus ik weet zeker dat we iets in deze richting kunnen zien.

Er is meer onbenut potentieel

Ik heb hier mijn persoonlijke voorkeuren en wensen onderzocht, maar met zoiets capabels als Copilot en de grote taalmodellen die het aansturen, weet ik zeker dat er veel meer ideeën zijn die mensen nuttig kunnen vinden. Hoe dan ook, de toekomst van Copilot en Windows is best spannend, ervan uitgaande dat Microsoft de belofte van dit product kan waarmaken. Of dat ook echt gaat gebeuren is een andere vraag.