GitHub enseña a Copilot a generar código a partir de fotos y a entender órdenes de voz

GitHub ha anunciado una serie de actualizaciones de Copilot, así como un vistazo al «futuro agente» de su asistente de programación impulsado por IA.

Entre las actualizaciones destacadas se encuentra una función llamada Vision for Copilot, que permite a los usuarios añadir una captura de pantalla, foto o diagrama a un chat, y Copilot genera la interfaz, el código y el texto alternativo para darle vida.

Así, por ejemplo, alguien del equipo de marketing puede hacer una captura de pantalla de una página web e ilustrar algunos cambios que desea realizar en ella. En lugar de solicitar dichos cambios a través de mensajes de texto, ahora pueden cargar la imagen y simplemente pedir a Copilot que implemente los cambios especificados en el archivo.

Vale la pena señalar que esto ha estado disponible como una extensión en VS Code desde octubre, y Microsoft confirmó en la descripción de la aplicación que con el tiempo se eliminará en favor de su propia característica en GitHub, Copilot Chat. Anteriormente, también requería que el usuario tuviera su propia clave API.

GitHub también está introduciendo una nueva función llamada «sugerencias de próxima edición» como parte de la funcionalidad más amplia de Copilot para autocompletar código. Hasta ahora, GitHub Copilot en VS Code ha trabajado desde la posición del cursor, pero ahora se verá en otras ediciones recientes para predecir lo que podría querer hacer a continuación. Esencialmente, utiliza pistas contextuales más ricas para identificar y sugerir automáticamente cuál debería ser la siguiente edición. Si el desarrollador quiere aceptar las sugerencias, puede pulsar la tecla Tabulador, o Esc para rechazarlas.

El futuro de GitHub basado en agentes

El pasado mes de noviembre, GitHub estrenó una nueva función llamada Copilot Edits, que consiste en una nueva forma de realizar ediciones en varios archivos utilizando indicaciones en lenguaje natural. Esta función está pasando ahora a disponibilidad general y también incluye un nuevo modo «agente» que identifica todos los archivos relevantes para los cambios que un desarrollador está tratando de hacer, en lugar de depender de ellos para seleccionar manualmente los archivos a los que se deben aplicar los cambios.

A largo plazo, el objetivo es ver esos «modos de agente» aplicados a otros aspectos de Copilot, permitiendo una mayor automatización a través de una gama más amplia de tareas interconectadas. Esta es la razón por la que GitHub también ha anunciado una nueva iniciativa llamada Proyecto Padawan. Se trata esencialmente de un agente SWE (ingeniería de software) que puede manejar tareas enteras por sí solo bajo la dirección del desarrollador que asigna la tarea Copilot.

Doomke no dio ninguna indicación sobre cuándo podrían estar listas estas actualizaciones para su uso generalizado, sólo que se está trabajando con los socios y la comunidad para mejorarlas.

Fuente: TechCrunch