👻 La Newsletter de @weareDMNTRs 👻
Esta semana la empresa española Gigas ha tenido un importante incidente que ha afectado a su operativa.
Gigas es un grupo internacional que nació en 2011 y se ha especializado en la prestación de servicios convergentes e integrales de comunicaciones y cloud para empresas. La empresa cuenta con presencia en 9 centros de datos repartidos entre Europa y Latinoamérica y oficinas en 8 países
El pasado día 10 de Diciembre informaban a sus clientes de que tenían algún tipo de problema, la cosa empezaba tal que así:
Al día siguiente, con la gente ya gritando fuerte por twitter, gigas volvía a lanzar un comunicado:
Llevaban casi un día fuera de juego, pero la cosa parecía próxima a arreglarse.
En este momento aun ningún cliente sabía qué había pasado. Las horas pasaban y en twitter la gente cada vez gritaba más fuerte. No me quiero imaginar el correo, teléfono o chat de soporte...
Aquí tenemos que recordar que gigas es una empresa que cotiza en bolsa, y a pesar de que no se resintió demasiado, seguro que mucha gente de arriba comenzó a pedir explicaciones.
Sobre todo porque el rumor era el obvio siempre que pasan estas cosas: LOS HAN HACKEADO.
Y la gente estaba muy muy nerviosa, como es lógico.
Así que 24 horas después gigas subía este nuevo comunicado:
Básicamente dicen: Oye solo se ha roto la parte del almacenamiento SAS, nada de hackeo, y los clientes tienen una solución de contingencia.
La solución consistía en levantar un nuevo servidor. Pero nos consta que sin datos, solamente un servidor vacío, al menos por ahora.
Los datos tardarían un rato más. Un rato largo.
Al día siguiente, con noticias sobre el tema en periódicos y todo, gigas emitía un nuevo comunicado:
Y en este, por fin, comenzaban a dar datos de QUÉ había pasado, CÓMO había pasado y A QUÉ ESTABAN ESPERANDO.
Pero tenemos que recordar que los clientes llevan 3 DÍAS sin funcionar. Algunos de ellos de renombre, como periódicos, empresas sanitarias o el servicio municipal de bicicletas de Murcia.
Que si tienen poco con vivir en Murcia, encima los dejan sin bicicletas a los pobres. 🤣🤣🤣 (Es bromita. ¡Un abrazo enorme a mis amigos murcianos!!)
¡Continuamos!
El día 14 gigas vuelve a lanzar comunicado:
Claro, aquí ya muchos clientes comenzaron a trabajar con sus servidores, a pesar de faltarles datos, por lo que aunque gigas posteriormente prometió recuperar esos datos, para mucha gente iban a ser inservibles o bastante difícil volverlos a integrar.
Porque, como siempre digo, cuando tiras de backup, por mucho que recuperes, siempre siempre siempre es una tragedia.
Pero bueno, 4 días después, por fin muchas webs habían revivido y la operativa de muchas empresas estaba recuperada.
Por último, el pasado viernes gigas lanzó lo siguiente:
A pesar de que me surgen, y no solo a mí, ALGUNAS DUDAS, parece que el problema ha tenido final feliz.
Aunque con 5 días de delay. 5 días. 5 días infernales para mucha gente, seguro.
No sé si lanzaran un postmortem en estos días, estaremos atentos, me gustaría tener más datos de todo esto, la verdad...
Y ahora vamos a las conclusiones.
En primer lugar, desde aquí mis respetos por todo el equipo técnico y de atención al cliente que ha tenido que hacer frente a este incidente.
Imagino que habrán sido días de mucho estrés. Demasiado. No está pagado eso.
En segundo lugar, nos toca aprender mucho de este tipo de incidentes. Mucho.
Porque por mucha historia que tengamos montada y mucho backup que tengamos disponible, ¿cuánto tiempo tardaríamos en volver a levantar todo? ¿Es razonable ese tiempo? ¿Tenemos la estructura suficiente para ello?
Porque claro, tú puedes decir: "No, en caso de que se rompa X, levantamos los servidores en Y, y recuperamos los backups". OK. ¿Pero tienes personal o el sistema lo suficientemente automatizado como para hacerlo en un tiempo razonable? ¿Lo has pensado?
Son preguntas que me surgen y me hacen replantearme muchas muchas cosas. No te voy a mentir si te digo que he estado pensando en maneras de mejorar nuestra infra para intentar evitar cosas así, de hecho ya ando trabajando en ello.
Pero, como siempre digo: Shit Happens. Cuando menos te lo esperas. Nada es infalible.
Así que, como cada puñetero día en esta profesión, toca seguir aprendiendo y mejorando. No queda otra.
Y tú, ¿estás preparado para algo así?
¡Feliz Domingo a todos!
📰 La actualidad 📰
Pues... esta semana he lanzado un podcast... o algo así...
Básicamente, consiste en un tío, o sea yo, hablando desde su coche.
Poco más. ¡Pero espero que os guste!
Y también estuve hablando de por qué en el futuro "casi" todo será UDP:
¿No está mal, no?
📷 La imagen de la semana 📷
Así felicitamos la Navidad en DMNTR:
🔗 Cajón desastre... 🔗
¡Vamos a los links!
- QNAP además de NAS ahora fabrica calefactores para cuarto de baño. ¿El jefe de diseño de JATA ahora trabaja en QNAP? 🤣🤣🤣
- Digi ultima la venta del 100% de su red de fibra a los dueños de Onivia por 1.000 millones. Curioso.
- Digi firma un acuerdo con Orange y MásMóvil: la fusión se acerca. No entiendo nada...
- Movistar negocia con Zegona para que los clientes de Vodafone puedan usar su red de fibra. ¡Pero que está pasando!
- Adobe ha estado manipulando a los usuarios para que pagasen más de lo esperado por suscribirse. Ahora se enfrenta a una gran multa. Adobe. Ladrones.
- How fast is your internet in bananas? La gente es que se aburre...
- Meet UniFi - Introducing Etherlighting. Estas cosas que no acabas de ver, pero que molan.
- Controla cualquier PC a través de HDMI con este sencillo dispositivo. Me dicen que no va demasiado bien, pero la idea mola...
- Routers y dispositivos conectados tendrán que certificar que son ciberseguros para venderse en España. Más burocracia.
Y fin...
Hoy domingo es el cumpleaños de mi compañera de vida, la que hace posible que pueda hacer todo lo que hago, echándome un capote cuando lo necesito. Este Dementor solo es posible con ella al lado. ¡FELICIDADES!
Además, la próxima semana estaré por Madrid, zona centro para más señas.
Si alguien quiere echar un cafelete una tarde, que me pegue un toque y a ver si conseguimos cuadrarlo, que no está fácil la cosa, pero se intenta.
Y por cierto, esta será la última Newsletter de este año. Toca descansar hasta el 14 de Enero y disfrutar de la familia, los amigos y todas esas cosas.
Así que Feliz Navidad, Feliz 2024 y todas esas cosas.
Y nada, sigo a mis cosas. ¡Para cualquier cosa me tenéis activo por Twitter o en Telegram!
¡Ahora es podcaster! ¡PODCASTER! ¿Y este tío cuando trabaja?
