5 características que AI Copilot de Windows 11 necesita para ser realmente útil

La IA se ha convertido en una gran parte de la estrategia de Microsoft durante el último año más o menos. Claro, eso podría decirse de muchas empresas, ya que AI parece ser la palabra de moda en este momento. Pero Microsoft recientemente dio el paso audaz de llevarlo a ventanas 11 en forma de Copiloto de Windows, un nuevo asistente de IA que es (extraoficialmente) un sucesor de Cortana. Está impulsado por el modelo de lenguaje grande GPT-4 utilizado en Bing Chat para crear una herramienta que espera ser más útil que nunca.

Si bien el potencial es emocionante, la implementación actual de Copilot en las compilaciones de Windows Insider es muy básica y no muy diferente de simplemente usar

Chat de Bing En la red. Tengo algunas ideas sobre lo que Microsoft puede hacer para que Copilot sea una parte realmente esencial de Windows 11.

1 Apoyo todo ajustes del sistema y funciones principales

El gran atractivo de Windows Copilot en el lanzamiento fue que podía interactuar con su PC en formas que Bing Chat, como solo un navegador, realmente no podía. Y este es un gran punto de partida. A muchos usuarios avanzados ya les gusta usar interfaces basadas en texto y comandos de teclado para realizar ciertas tareas, por lo que poder cambiar muchas de estas configuraciones desde un solo lugar tiene mucho potencial.

Sin embargo, la implementación actual solo admite algunas características, como poder cambiar al modo claro u oscuro, activar No molestar o tomar una captura de pantalla. Esto realmente necesita expandirse a todo la configuración de Windows que se puede encontrar en la aplicación Configuración (el Panel de control probablemente debería quedar atrás en este punto), o al menos mucho más de lo que tenemos ahora. Podría cambiar el color de énfasis, deshabilitar una de las pantallas en una configuración de varios monitores, cambiar los dispositivos de reproducción, etc. Incluso podría iniciar una sesión de enfoque.

Si Windows Copilot pudiera ayudar con todo esto, podría hacer que la interacción con ciertas configuraciones sea mucho más rápida, especialmente para las personas que lo hacen con frecuencia. Hay muchas cosas que se pueden hacer, y Microsoft ha prometido algunas de ellas, pero aún no las ha entregado.

2 Ganchos fáciles de aplicaciones

Otra cosa que siento que hará o deshará la utilidad de Copilot es su integración con otras aplicaciones. Con el espíritu de convertirse en un asistente de IA centralizado, Copilot debe poder integrarse fácilmente con todo tipo de aplicaciones de terceros. Vimos esto en acción cuando Microsoft hizo una demostración de Copilot en la construcción de este año y lo usé para reproducir música con Spotify. Pero aún no hemos visto que eso se vuelva funcional, y necesita ir más allá de los socios habituales de Microsoft.

Copilot debería poder abrir aplicaciones e iniciar una tarea específica dentro de ellas, o reproducir un programa específico en Netflix, o cualquier otra cosa que pueda ser útil en estas aplicaciones.

3 Integración con el Explorador de archivos

Sé que la gente probablemente esté harta de que Microsoft calce servicios no deseados siempre que pueda, pero creo que tener la integración de Copilot en el Explorador de archivos podría hacerlo útil para más que solo usuarios que desean escribir instrucciones en Copilot, especialmente porque eso requiere que la ventana de Copilot ocupe espacio en su pantalla casi permanentemente.

Podría ser interesante tener una función en el Explorador de archivos donde puede hacer clic con el botón derecho en un archivo y elegir una opción llamada "Enviar a Copiloto", que luego le pedirá que le pregunte qué quiere hacer con dicho archivo. Por ejemplo, con una imagen, puede pedirle a Copilot que elimine el fondo o puede pedirle que transcriba un archivo de audio. Ambas son capacidades que hemos visto mostradas, pero eso generalmente requerirá que arrastre y suelte el archivo en el panel Copilot. Creo que sería bienvenido poder acceder a él directamente desde el Explorador de archivos (pero la opción de desactivarlo también sería buena).

4 Control de voz

Sospecho que estoy solo en este, por lo que lo he bajado un poco. Los comandos de voz son obviamente más populares en los teléfonos y, en este momento, Bing Chat solo admite esta función si está en su teléfono. Pero creo que sería bueno que los comandos de voz fueran compatibles con portátiles y PC, también. Podría ser útil poder cambiar todas estas configuraciones, comenzar a reproducir música o abrir una aplicación con su voz. Y lo mismo ocurre con las preguntas de Bing. Cortana lo admitió cuando se presentó Windows 11, y Microsoft quería que fuera algo grande, por lo que no estoy seguro de si ganaría mucha tracción, pero definitivamente puedo ver usos para él.

Con un navegador, tiene que esforzarse un poco para iniciar la interacción de voz, pero con un característica incorporada, podría tener una palabra clave de activación o acceso directo, para que pueda decir rápidamente su comandos Me imagino que no sería tan difícil de implementar ya que el reconocimiento de voz ya se usa en varias partes de Windows.

5 Lectura de pantalla y OCR

Una última cosa que me encantaría ver que Copilot pueda hacer es leer la información en la pantalla y, especialmente, el reconocimiento óptico de caracteres (OCR). En este momento, puede pedirle a Copilot que resuma una página, pero tiene que estar en un sitio web abierto en Edge, lo que limita severamente la funcionalidad. Si bien el enfoque ideal sería tener este trabajo con otros navegadores de forma nativa, sería interesante si Copilot pudiera básicamente actúa como un lector de pantalla (como Narrador) y lo usa para extraer información de cualquier página en cualquier navegador o aplicación para resúmelo.

Otra característica interesante sería OCR, o la capacidad de reconocer texto en imágenes, por lo que podría pedirle a Copilot que tome texto de una imagen o un escaneo de PDF y simplemente copiarlo o resumirlo. En realidad, este no es tan loco ya que se ha informado que se planea algún tipo de capacidad de OCR para ventanas 12, así que estoy seguro de que podríamos ver algo en este sentido.

Hay más potencial sin explotar

Exploré mis preferencias y deseos personales aquí, pero con algo tan capaz como Copilot y los grandes modelos de lenguaje que lo potencian, estoy seguro de que hay muchas más ideas que la gente podría encontrar útiles. De todos modos, el futuro de Copilot y Windows es bastante emocionante, suponiendo que Microsoft pueda cumplir la promesa de este producto. Si eso realmente sucederá o no es otra cuestión.