Ask HN: Si las herramientas de IA son tan buenas, ¿por qué no está vacío tu backlog de bugs?
Ask HN: If AI tools are so good, why isn't your bug backlog empty?
Mucha gente fuera de la tecnología me pregunta si la IA va a reemplazar a los programadores, y pienso: si eso fuera cierto, deberíamos quedarnos sin cosas que hacer. El backlog de bugs debería estar vacío y habríamos alcanzado cada solicitud de funcionalidad de los PMs hasta el punto de estar limitados por el lado del negocio. Pero ese no parece ser el caso en mi propia empresa ni en la mayoría de los desarrolladores con los que hablo en la industria. Entonces, ¿qué está pasando?
No sé si estoy haciendo algo mal, pero arreglar bugs con IA siempre ha sido una lotería. Puedes pedirle a un agente que arregle un problema, y lo arreglará, pero la gran mayoría de las veces esa solución consistirá en agregar código para cubrir el síntoma específico del informe de bug. Rara vez considera o recomienda soluciones que tengan compensaciones que puedan cambiar el comportamiento pero que eliminen toda una clase de bugs similares. Esto es principalmente un problema de que los agentes no tienen la autonomía de gestionar un proyecto completo y la capacidad de tomar decisiones para aumentar la simplicidad o el mantenimiento, pero cuando se les da esa autonomía, ningún modelo de IA que he usado utiliza ese privilegio para escribir código más simple y mantenible.
Me hace preguntarme si podría resolverse con una mejor gestión del contexto. Un desarrollador real construye un contexto global de todo el proyecto con el tiempo, siempre mantienes la arquitectura general en tu cabeza. Mientras que con los agentes todavía se pierde mucho entre sesiones. Es similar en el sentido de que un desarrollador nuevo en un proyecto hace más soluciones locales chapuceras, mientras que el senior del equipo sabe cuándo la arquitectura necesita cambiar como parte de una solución.
El mío sí lo está. He estado diciendo a mi alta dirección que es más barato reescribir cosas desde cero con IA que arreglar productos ANTIGUOS. Se lo tragaron y todo lo que tenemos ahora nunca alcanza el estado v1.0.
Está vacío, para mí y mi equipo (soy un engineering manager). Todavía tenemos una rotación de soporte, pero es solo para que alguien esté al tanto de que se supone que deben responder a cualquier alerta que surja. Edición: el producto tampoco tiene un backlog profundo. Por lo general, solo podemos planificar entre un par de días y un mes por adelantado. Lanzamiento reciente importante del producto, así que estamos en el horizonte más largo que hemos tenido en un tiempo.
Puedo confirmar lo mismo, el backlog está más o menos vacío a menos que intentemos atacar un nuevo dominio, y eso suele ser una fiesta de 2-3 meses, después de eso casi tienes que imaginar tareas. Esto realmente me huele a una situación de fin del backlog.
- frostiness
No sé si estoy haciendo algo mal, pero arreglar bugs con IA siempre ha sido una lotería. Puedes decirle a un agente que arregle un problema, y lo arreglará, pero la gran mayoría de las veces esa solución consistirá en añadir código para cubrir el síntoma específico del informe de bug. Rara vez considera o recomienda soluciones que tengan compensaciones que puedan cambiar el comportamiento pero que eliminen toda una clase de bugs similares.
Esto es principalmente un problema de que los agentes no tienen la autonomía de gestionar un proyecto entero y la capacidad de tomar decisiones para aumentar la simplicidad o el mantenimiento, pero cuando se les da esa autonomía, ningún modelo de IA que he usado utiliza ese privilegio para escribir código más simple y mantenible.
- td521534f12
Todos los backlogs de mis proyectos en solitario _están_ vacíos.
Para mis proyectos en equipo, todavía necesito que mis compañeros revisen el código, así que eso limita la velocidad a la que podemos quemar el backlog. Si no necesitara revisión de código, habría quemado el backlog en semanas, pero crearía un montón de caídas en el proceso (¡de hecho, atrapamos cosas en la revisión de código!).
Además, algunos de mis proyectos en solitario están relacionados con el desarrollo de videojuegos, y el desarrollo de videojuegos también tiene el cuello de botella de jugar realmente tu juego para ver si es divertido :) pero es genial salir de una sesión de playtest de 2 horas con notas y tener una nueva build en unos 15 minutos con los comentarios incorporados.
- fishtoaster
¿Prácticamente lo está? Todos los bugs fácilmente descritos se han arreglado. Lo único que queda es "esto no está mal per se, simplemente viola las expectativas del cliente" y alguien necesita averiguar qué debería hacer el producto en este caso.
En primavera acabamos con nuestro backlog de cosas del tipo "obviamente deberíamos hacer esto cuando tengamos tiempo". Fue bastante divertido tachar prácticamente toda mi lista de refactorizaciones y limpieza de varios años.
Ahora estamos prácticamente limitados por el lado del negocio.
- GuB-42
Porque la IA es mejor encontrando bugs que arreglándolos.
Tampoco es buena escribiendo código libre de bugs.
La IA y los humanos no cometemos los mismos bugs. Así que la IA puede encontrar bugs que los humanos pasan por alto fácilmente, mientras que al mismo tiempo es increíblemente estúpida en otras partes.
- mattbrewsbytes
Si tu equipo y producto tenían un backlog grande antes, eso no va a cambiar. Las herramientas de IA amplifican lo que sea que hagas, así que si has estado ignorando bugs y centrándote la mayor parte del tiempo en nuevas funcionalidades, la IA no va a cambiar mágicamente en qué está trabajando un equipo.
A nivel técnico, toma tu NullPointerException promedio o el equivalente en el lenguaje que uses. Pídele a la IA que lo arregle y de forma sensata envolverá o comprobará los nulos en esa pieza de código. Pídele a un lead o a un ingeniero senior que lo arregle y (con suerte) empezará con "¿por qué este dato es nulo? no debería serlo" y luego rastreará hacia atrás en los logs o los datos, intentará recrearlo con un escenario real y no solo arreglará ese bug sino que encontrará que hay un escenario no manejado en otra parte del código. Alguien podría pedirle a la IA que amplíe más y haga un análisis de causa raíz, pero ¿confías en que encuentre las cosas y las arregle correctamente?
- yokuze
> El backlog de bugs debería estar vacío
No lo entiendo.
Quizá sea cosa mía, pero nunca he trabajado en una empresa ni en un producto sustancial que tuviera un backlog de bugs vacío. Si una cola de bugs está vacía, o el producto no se usa mucho (o no es prioritario), o no se prueba lo suficiente, o no se monitoriza lo suficiente.
No sé si un mundo en el que la IA ha reemplazado en su mayoría a los programadores es un mundo con una cola de bugs vacía.
Si bien la IA está reduciendo la _cantidad_ de programadores necesarios en muchos casos, también es un multiplicador de producción para los programadores restantes, mientras que a menudo aumenta la ratio de bugs por código.
La IA ha llevado a más producción, más proyectos y más bugs.
- drltaidev
Aquí también hay una historia de huevo y gallina: la IA acelera todo, así que la cantidad de código escrito es mucho mayor, el cual todavía contiene bugs, incluso si la IA puede resolverlos en su mayoría, también se seguirá escribiendo código nuevo... Eso no significa que las herramientas de IA no sean buenas, pero obviamente tampoco son perfectas. Por suerte...
- pickleglitch
No soy muy fan de la IA, pero en mi trabajo esperan que la usemos. En mi puesto, no importaría realmente lo buena que fuera la IA, porque cuando encontramos un bug a menudo hace falta una reunión de una hora, o incluso varias, solo para averiguar cuál debería ser realmente un comportamiento dado antes de que podamos siquiera intentar arreglarlo.