Lo que nos enseñaron los problemas de CI/CD de ayer

El 12 de octubre de 2026, nuestra integración continua tuvo dificultades. Master estuvo en rojo más que en verde: de 22 ejecuciones completas de calidad, 10 fueron verdes y 12 rojas; otras 36 se cancelaron al ser reemplazadas por nuevos envíos. La respuesta tardaba entre 47 y 61 minutos por envío, y los despliegues web en dev y prd se detuvieron dos horas. Casi todos los fallos se debieron a pruebas intermitentes y carreras de procesos, no a errores del producto.
Cuando el tronco falla, toda la flota sufre. Enviar cambios a un tronco en rojo bloquea a los desarrolladores y multiplica los errores. El propietario del proyecto pausó el desarrollo de funciones y las refactorizaciones hasta estabilizar y acelerar la integración. Fue cambiar una mañana lenta por días mucho más rápidos y fiables.
Atacamos los cuellos de botella reales. Primero, migrar las pruebas a ejecutores alojados de GitHub bajó los tiempos de unos 50 minutos a 30.4 minutos de mediana (n=12), reduciendo las colas de 19 minutos a menos de 0.1 minutos. Segundo, la puerta de calidad ahora prueba solo las partes modificadas por cada envío, basándose en la última ejecución verde de cada tarea. Tercero, las comprobaciones locales rápidas antes de enviar atraparon fallos simples en segundos. Tras cambiar de ejecutores, rondas de refactorización dirigidas (r8 a r14) recortaron minutos a las pruebas lentas, como reducir una prueba de navegador móvil de 164 a 63 segundos (n=3). También cambiamos el enfoque: contar fallos por tarea y no por ejecución reveló que 42 ejecuciones rojas solían deberse a solo seis causas raíz.
Esta experiencia consolidó buenas prácticas clave:
- Medir primero: cronometrar la espera real y contar operaciones antes de optimizar.
- Demostrar cada mejora con una prueba de recuento y un control que falle con el código antiguo.
- Ejecutar comprobaciones rápidas locales antes de enviar para mantener limpio master.
- Aislar fallos deliberados y controles en ramas temporales, nunca en master.
- Tratar las pruebas intermitentes como defectos reales con máxima prioridad.
- Refactorizar de forma continua en rondas pequeñas y medidas con muestras claras.
- Asignar cada tarea rota a un único responsable de inmediato.
Arreglar la integración continua acelera directamente el lanzamiento de futuras funciones. Ciclos de respuesta cortos y compilaciones verdes aportan velocidad y confianza.