Microsoft Copilot ya puede "ver" el contenido de tu pantalla en Edge.

Copilot Vision, la nueva funcionalidad de asistente de inteligencia artificial de Microsoft, que permite interpretar lo que aparece en la pantalla y asistir en el uso de aplicaciones, ahora está disponible de forma gratuita en el navegador Edge, según lo anunció Mustafa Suleyman, CEO de Microsoft AI. Este sistema se describe como una "experiencia basada en conversaciones", lo que significa que los usuarios interactúan mediante comandos de voz y esperan la respuesta de Copilot.

Suleyman destaca que, al activar esta función, Copilot Vision puede "ver literalmente lo que ves en pantalla". Propone diversas aplicaciones prácticas, como seguir una receta mientras cocinas o ayudar a analizar descripciones de puestos de trabajo, facilitando así la preparación personalizada para entrevistas o la elaboración de cartas de presentación. Sin embargo, se advierte que el uso de la inteligencia artificial para crear un currículum podría no ser la mejor opción.

En una página de soporte de Microsoft se indica que “Copilot Vision puede resaltar partes de la pantalla para ayudarte a encontrar información relevante”, aunque no interactúa haciendo clic en enlaces o realizando acciones por ti. Las funcionalidades más amplias de Copilot Vision están restringidas para los suscriptores de Copilot Pro. Con esta suscripción, se puede utilizar Vision más allá de Edge, ayudando en programas como Photoshop o software de edición de video, e incluso guiando a los usuarios en juegos como Minecraft.

Para probar Copilot Vision, se puede acceder a un enlace en el sitio de Microsoft desde el navegador Edge. Esto debería generar un aviso para optar por la funcionalidad. Una vez que se otorga el permiso, es posible abrir la barra lateral de Copilot en una página web, hacer clic en el icono del micrófono y comenzar la sesión de Vision, la cual se indica con un sonido y un cambio en el tono del navegador. Sin embargo, algunos usuarios han reportado dificultades para activar la función y problemas con los controles que no siempre aparecen, especialmente aquellos con dispositivos más antiguos.

Microsoft asegura que registra las respuestas de Copilot, pero no recolecta entradas, imágenes ni el contenido de la página durante una sesión de Copilot Vision. Cuando decidas dejar de compartir tu pantalla, puedes finalizar la sesión o cerrar la ventana del navegador.