Una fuga en el origen del incendio en el centro de datos de Global Switch Clichy

Ayer, uno de los centros de datos de Global Switch se incendió en Clichy, al noroeste de París. Entre los clientes afectados, destacamos Google, Cybermalveillance.gouv.fr, Ecritel France y los sitios web de ciertas ciudades francesas. PayPlug, una pasarela de pago francesa, que aparentemente olvidó la parte redundante de la nube, también pagó el precio de este incidente. Ayer durante el día, un portavoz del operador del centro de datos dio algunas respuestas: “Esta mañana se produjo un incendio en una habitación de uno de los dos centros de datos en nuestro sitio de París. . Los bomberos respondieron rápidamente y el incendio ya está bajo control. Los dispositivos contra incendios del edificio funcionaron perfectamente, nadie resultó herido. El servicio para algunos de nuestros clientes se ha visto afectado temporalmente y nuestro equipo en el sitio está trabajando para restaurarlo lo más rápido posible”.

Ahora sabemos más sobre el origen del fuego. Según Hacker News, una tubería estalló dentro del centro de datos en la sala del inversor y provocó un incendio eléctrico. Dicho fuego y agua luego destruyeron el centro de datos. El fuego fue contenido 2 horas después pero el aire acondicionado no funciona. Fue solo alrededor de las 11:30 am que se encendió nuevamente, bajando gradualmente la temperatura. Por la tarde, los bomberos pidieron entonces que se cortara la luz y el personal no tenía permiso para ingresar a los edificios. En el foro La fibre.info nos enteramos que a las 15:19 horas el fuego fue declarado extinguido pero elLos bomberos todavía no pueden acceder a la sala de inversores/baterías en el nivel 1 porque la temperatura en el interior era superior a 65 °C. Los inversores/baterías que se han quemado están dedicados al nivel 1, por lo que los otros niveles no se ven afectados. Inmediatamente después se llevó a cabo una reunión de crisis. Surgen los siguientes puntos: psin cortes previstos en el PAR E (refrigeración/electricidad), la infraestructura técnica está operativa (aire acondicionado, electricidad, parachispas, etc.). Por lo tanto, todos los clientes de Clichy 1 pueden reiniciar sus servidores. Finalmente, los niveles L4, L5 y L6 son accesibles para los clientes bajo la supervisión de un entrenador de Global Switch. El nivel L1 (inversores y MMR1) permanece bajo vigilancia, solo los bomberos están autorizados a ingresar. Una situación difícil con importantes repercusiones para los clientes. De hecho, pagPara colmo de males, Google Cloud ejecuta múltiples zonas desde el mismo edificio, pero con diferentes conexiones de alimentación/respaldo/internet a esos servidores. En este caso, el desastre afectó a varias áreas, incluidas europa y París (europe-west9).

Google anda a tientas

En el suministro de noticias de incidentes de GCP, Google indica que, hasta la fecha, varios servicios de Google Cloud en la región europe-west9 todavía están afectados. “No hay un tiempo programado para la reanudación completa de las operaciones en la región de europa-oeste9 en este momento. Esperamos una interrupción prolongada de algunos servicios. Se recomienda a los clientes que cambien a otras regiones si se ven afectados”. Sin embargo, los siguientes servicios se han restaurado por completo en la región europe-west9: Google Cloud Storage (GCS) Cloud Key Management Service (KMS) Cloud Identity and Access Management (IAM) Google Kubernetes Engine (GKE). Sin embargo, algunos servicios se restauraron en las zonas europe-west9-b y europe-west9-c, pero continúan afectados en la zona europe-west9-a: Google Compute Engine (GCE) Cloud Run Google Cloud Load Balancer ( GCLB ) DataProc Cloud SQL

Cloud Console también sufrió una interrupción global, que se ha mitigado. “Las tareas de administración deberían volver a estar operativas para las operaciones fuera de la región afectada (europe-west9)”, dice Google en su seguimiento. GCE sufrió el mismo destino y afectó a los clientes que usaban Global DNS (gDNS) al mismo tiempo. La firma planea brindar una actualización antes de las 4 p. m. de este jueves 27 de abril, o en caso de un acontecimiento importante.