OVH down, incendio datacenter 🔥

Ho letto dei commenti aberranti su Twitter in risposta all'annuncio dell'incendio da parte di Octave Klaba (chairman di OVH). Quasi tutti si lamentavano di aver avuto "gravi disservizi" e chiedevano quando sarebbero tornati online i loro server/VM.

DR e business continuity, questi sconosciuti...

Un pezzo di discussione è qua per la cronaca

https://forum.fibra.click/d/11159-backup-dati-in-cloud/42

Foto: https://twitter.com/xgarreau/status/1369559995491172354

mpanella Ma più che altro, mancanza di conoscenza basilare di come funzioni il mondo cloud... danno a disposizione più availability zone appositamente perché i servizi possano essere distribuiti geograficamente con minima fatica e costi. Se metti tutte le uova in un paniere, non puoi lamentarti poi se si rompono...

Le catastrofi capitano purtroppo a tutti, nessuno ne è immune. Puoi tentare di prevenirle e limitarle, ma se devono capitare capitano.

Attendiamo le indagini... sul potente sistema antincendio del datacenter
Chissà cosa è andato storto.

Non vorrei sembrare cattivo ma mi sembra la questione generatori capitolo secondo. Solo che sta volta gli è andata peggio. Vediamo come va a finire ma direi che se è un malfunzionamento dei sistemi antincendio è abbastanza grave da parte loro.

dite che l'assicurazione paga? XD

Io mi sorprendo di come loro non avessero nemmeno un ORS, visto che sono abbastanza grossi in europa.

Btw, sto seguendo questa notizia da un po', ogni minuto che passa diventa peggiore.
Qualche loro cliente dice di aver visto una manutenzione programmata in merito a dei cavi elettrici difettosi poco prima

LucaTheHacker Qualche loro cliente dice di aver visto una manutenzione programmata in merito a dei cavi elettrici difettosi poco prima

Shit happens, sapessi quanti incidenti succedono con utensili che cadono su sbarre in tensione durante le manutenzioni. E tra l'altro, se hanno preso fuoco le batterie degli UPS gli impianti antincendio riescono a fare poco e niente.

mpanella Teoricamente gli UPS e in generale gli alimentatori dovrebbero essere esterni alla struttura.
Comunque si sarebbero salvati con l'ORS, per quanto ne so

[cancellato] Cosa intendi con ORS?

Oxygen Reduction System, di base tiri la soglia di ossigeno nell'aria sotto a quella necessaria per creare il triangolo del fuoco ma comunque abbastanza alta per non causare problemi all'uomo.

[cancellato] Non sono riusciti a spegnerlo nemmeno i pompieri durante tutta la notte... vedete voi

Ci sono i video dello spegnimento, non sono un pompiere, ma sparando acqua "alla cieca" su una roba dove all'interno sono presenti servers non mi risulta essere un ottimo metodo.
Vedo se riesco a ritrovare il video

[cancellato] Normale routine, se guardi quanti eventi di questo tipo succedono. Non so se hai presente la scala dimensionale di OVH, hanno decine di migliaia di apparati come minimo

Assolutamente, ma qualcuno faceva proprio notare questa coincidenza.
Dopo l'incendio quella manutenzione è sparita

LucaTheHacker Ci sono i video dello spegnimento, non sono un pompiere, ma sparando acqua "alla cieca" su una roba dove all'interno sono presenti servers non mi risulta essere un ottimo metodo.

Non è che possono fare in modo diverso...

[cancellato] Se prende fuoco una batteria, o una cisterna di gasolio dei genset, potete avere tutti gli halon di questa terra, ma l'unica cosa è scappare.

Amen, se prende fuoco una sala batterie o una cisterna del gasolio il miglior DPI è un buon paio di scarpe da corsa.

Le risposte ai tweet del chairman di OVH fanno venire la pelle d’oca

mpanella Aggiungerei anche un augurio di capodanno

rieges Beh, sicuramente innaffiare dei server non è la migliore delle cose, soprattutto sparando alla cieca, forse usare roba più "appropriata", come roba a polvere, sarebbe stato più efficace, ma io non faccio il pompiere.

LucaTheHacker innaffiare dei server non è la migliore delle cose

A quel punto non sono più server ma carcasse. Letteralmente.

LucaTheHacker Oxygen Reduction System, di base tiri la soglia di ossigeno nell'aria sotto a quella necessaria per creare il triangolo del fuoco ma comunque abbastanza alta per non causare problemi all'uomo.

Già scritto. Dipende da dove si è originato il fuoco.
E non hai idea di cosa possa fare una volta che questo è partito.

LucaTheHacker non sono un pompiere, ma sparando acqua "alla cieca" su una roba dove all'interno sono presenti servers non mi risulta essere un ottimo metodo.

Appunto, non sei un pompiere.
Partiamo da un assunto di base, regola zero dei VVFF: Safety first, se puoi contenerlo contienilo, salva vite umane se non rischi la tua, se non riesci a spegnerlo lascialo bruciare, si spegnerà da solo.

Cosa potevano fare da fuori? Entrare con una manichetta dentro a un locale a migliaia di gradi, a rischio crollo strutturale, per fare poi cosa? Tentare di salvare oggetti materiali riproducibili che comunque sarebbero danneggiati irreparabilmente da calore, acqua e fumo? Ma ci pensate un attimo a cosa scrivete?

LucaTheHacker Come fai a sparare la polvere all'interno del DC?

Finché non avremo robot-pompieri in titanio non si potrà entrare in un edificio in fiamme a sparare agenti di soppressione del fuoco.

Poi le temperature all'interno del DC sono altissime e la tuta protegge fino ad un certo punto.
Una vita umana non vale qualche server già irrecuperabile.