Resumen
El 15 de octubre, Linkly experimentó una interrupción prolongada causada por un despliegue automatizado que introdujo un error de configuración en producción. El problema también deshabilitó elementos clave de nuestros sistemas de monitoreo y alertas, retrasando la detección y respuesta.
Causa raíz
La falta de una protección permitió que un despliegue automatizado se ejecutara fuera de las ventanas aprobadas, resultando en una discrepancia de configuración que interrumpió el enrutamiento. Las verificaciones de monitoreo no detectaron la interrupción porque estaban limitadas a endpoints internos que continuaron devolviendo éxito.
Acciones correctivas
- 1Deshabilitamos los despliegues automáticos; producción ahora requiere aprobación manual.
- 2Implementamos monitoreo externo independiente de nuestra infraestructura principal.
- 3Agregamos canales de alerta redundantes (SMS y voz) para asegurar conocimiento inmediato de incidentes.
- 4Introdujimos bloqueos de despliegue durante horas no laborables hasta que se establezca cobertura de guardia 24/7.
Próximos pasos
Estamos revisando nuestros procedimientos operativos y ampliando la cobertura de respuesta a incidentes para asegurar detección y recuperación rápidas de cualquier problema futuro.
Cierre
Nos disculpamos por la interrupción y agradecemos a nuestros clientes por su paciencia. La confiabilidad sigue siendo nuestra máxima prioridad, y estamos comprometidos a prevenir que esto vuelva a ocurrir.
Rastrea 500 clics mensuales con todas las características incluidas.
No se requiere tarjeta de crédito