Los desarrolladores que utilizan Copilot son estadísticamente mejores en el último estudio de GitHub

En un estudio reciente realizado por GitHub, se puso a prueba GitHub Copilot para determinar si el asistente de codificación de IA está ayudando a los desarrolladores a escribir código que sea objetivamente mejor o peor que el código escrito sin IA. Para ello, GitHub trabajó con 202 desarrolladores de Python, 104 codificando con Copilot y 98 sin él. A los desarrolladores se les encargó crear un servidor web de reseñas de restaurantes y evaluar su funcionalidad con 10 pruebas unitarias.

Para cada uno de los envíos completados, al menos diez desarrolladores revisaron línea por línea el código, sin saber si se había escrito con o sin la ayuda de la IA. Las 1.293 revisiones resultantes evaluaron la legibilidad, fiabilidad, mantenibilidad y concisión de las muestras de código. Además, los revisores evaluaron si el código debía aprobarse en última instancia.

Los resultados del estudio son un buen augurio para el uso de la AI en la codificación, y GitHub destaca cuatro conclusiones clave.

1. Copilot ayudó a los desarrolladores a superar las diez pruebas unitarias con un 56% más de frecuencia que los desarrolladores sin IA, lo que se tradujo en un aumento de la funcionalidad.
2. El código asistido por Copilot es más legible y ayuda a los desarrolladores a escribir una media del 13,6 por ciento más de líneas sin encontrar problemas de legibilidad.
3. La legibilidad, la fiabilidad, la mantenibilidad y la concisión mejoraron una media del 3,29 por ciento, siendo la concisión la que recibió el impulso más significativo, del 4,16 por ciento.
4. El código asistido por copiloto se aprobó un 5 por ciento más a menudo que el código sin IA. Esto significa que se necesita menos tiempo antes de que el código esté listo para la producción.

Para obtener información más detallada sobre la metodología y los resultados del estudio, visite la entrada del blog oficial de GitHub enlazada a continuación.