Downtime e alimentazione nei data center: la maggior parte dei problemi sono qui

[Ste]

Leggevo su DK: Power Outage for Amazon Data Center « Data Center Knowledge dell'ultimo downtime di Amazon EC2, anch'esso provocato come tanti altri da un problema all'alimentazione del dc: se ripercorriamo le news relative ai grandi outage notiamo che un buon 50% è sempre dovuto ad un problema al sistema di alimentazione del dc, nella maggior parte dei casi sono i motori a non partire, il set di batterie che non funziona o altri sistemi di ridondanza che non entrano in funziona...sembra che ci si concentri molto su altri aspetti e poco sull'innovazione per questo aspetto, difficile pensare ad un servizio di cloud con uptime elevati e alti standard quando poi nella maggior parte dei casi il problema è relativo all'alimentazione dei data center. Opinioni in merito?

[infinytech]

Purtroppo talvolta succede che delle microinterruzioni, succedute da rapide vai e vieni, dell'alimentazione dalla rete elettrica non vengano correttamente rilevati dai PLC che pilotano UPS e generatori diesel.
Magari non è questo il caso, però questo è uno dei possibili casi

[etr]

secondo me è anche un problema di "età"...

tutta la parte di server/rete è ridondabile tramite software/firmware dei server/degli switch
Infatti, ad esempio, mettendo due router è un software (ex: VRRP) che me li ridonda. Stessa cosa per lo switch, creo un loop e poi è STP che me li gestisce.

Nel caso della corrente, posso avere due ups in parallelo che dialogano fra loro ma la corrente in uscita è complicato farla passare da entrambi per cui per evolvere secondo me si tratta di ristudiare la fisica

Ed è per questo che secondo me il settore dell'elettricità nei DC è quello più arretrato o comunque dove le evoluzioni non sono così "innovative".

Diciamo che si può lavorare sugli impianti magari creando linee separate, su percorsi separati su ups e generatori separati e , perchè no, su cabine elettriche diverse...

[Ste]

Si è un aspetto da considerare, buona osservazione, io ora non sono un esperto di questi sistemi, ma nella maggior parte dei casi il tutto è dovuto ad un fallimento nel sistema che dovrebbe garantire il servizio: motore che non si avvia (o non lo fa in tempo) e porta tutto down con se, pur contando il fatto che vengono testati più e più volte e tutto ciò accade in data center da mln

[ceccus]

Salve,
Mah ... queste cose mi lasciano sempre più "sbalordito" ... nel senso che , Noi, per esempio, come azienda, proviamo regolarmente i nostri sistemi di alimentazione alternativa come proviamo regolarmente le nostre procedure di Disaster-Recovery sui nostri 2 Data Center ... impegnando diverse decine di persone a volta ... però si fanno ... è vero che la componente informatica, per noi è molto importante ... ma lo dovrebbe essere a maggior ragione di coloro i quali lo fanno "di mestiere" e ci campano con l' Informatica ..................

Ciao !!

[guest]

Il problema non è tanto nel provare gli strumenti, cosa che anche noi, come voi, facciamo regolarmente, e così molti altri operatori.
Ma la sfiga quando si impunta si impunta.

Puoi provare 10000 volte il generatore, se poi proprio sul più bello quello non parte ci puoi fare poco.

[ceccus]

Salve,
E va bene la "sfiga" ... ma almeno 2/3 linee indipendenti di alimentazione e altrettante indipendenti relativamente ai dispositivi di emergenza ... e che diamine , un VERO Datacenter ce le deve avere ... altrimenti sennò ... si sta parlando di quasi principianti ... la stessa cosa relativamente ai sistemi di connessione con l' esterno ...

Ciao !!

[guest]

In Italia sai bene che più di una linea per numero civico l'Enel non te la porta vero?
Per cui, la linea è sempre la stessa che ti arriva da UNA centrale, poi da li in avanti te puoi splittare quanto ti pare, entrando in 34 generatori differenti, ma la linea in ingresso è e sarà sempre e solo una.

Ed anche se ti portassero più di una linea elettrica, la centrale di derivazione Enel sarebbe sempre la stessa per entrambe.
Sfido io a farsi allacciare a due centrali elettriche. La corrente non è una rete IP, che instradi come ti pare, magari anche in SDH wireless. Devi portare fisicamente il cavo, e ti serve una centrale di derivazione.
Se nella città o nel quartiere in cui sei l'enel ha solo una centrale, tu ti attacchi solo a quella, puoi smuovere mari e monti, ma non ti costruiscono una seconda centrale per te.

[ceccus]

Salve,
Ma te stai parlando di contratti residenziali ... ti posso assicurare che per le aziende, le grandi aziende, e non solo le banche (ti potrei citare le Acciaierie di Piombino, per esempio), le linee di alta tensione sono doppie e provengono da 2 sottoreti differenti ...
In più, te dici che se hai centrali nella zona ... a Piombino vi è una Centrale Enel ... ma non fornosce mica alimentazione a Piombino ... o meglio ... non solo a Piombino ... ha 2 Derivazioni ... una che si immette sul circuito Nazionale, la principale con acavi e tralizzi più grossi .. e al'ltra che arriva fin dentro le Acciaierie ... è un esempio, ma dovrebbe servire a farti capire come funziona il giro ...
Comunque, secondo me, ripeto, ci sono tanti che "sparano ai 4 venti" .. noi qui, noi là ... e poi, stringi stringi ..............................

Ciao !!

[guest]

Salve,
allora probabilmente solo con l'alta tensione (che si può consegnare ovviamente solo con i tralicci, dato che non puoi consegnare un singolo cavo di alta tensione per via aerea nei pali tradizionali) ma non mi risulta che in Italia ci siano Datacenter connessi direttamente alla rete ad alta tensione.

Spesso nemmeno gli aeroporti hanno l'alta tensione, ma solitamente hanno la loro cabina di trasformazione tra media e bassa.

Poi magari ci possono essere alcune zone a forte contenuto industriale in cui l'enel si struttura appositamente per consegnare alta tensione alle aziende, ma ti assicuro che a Riccione, ad esempio, se gli chiedi l'alta tensione ti ridono in faccia perchè non hanno la struttura per farlo se non in alcuni punti ben precisi vicino alla rete nazionale il che non sempre va d'accordo con la posizione ottimale dei datacenter.
(per rendere l'idea, abbiamo impiegato un anno per farci portare la trifase nell'ufficio attuale, tempo fa)

In poche parole, bisogna sempre trovare un compromesso:
molte fibre ottiche senza spendere milioni di euro in scavi? vai nel posto X.
molte linee elettriche in alta tensione? vai nel posto Y.

Ma se il posto X ed il posto Y non combaciano, devi trovare un compromesso.

L'unico modo per ridurre al minimo i downtime è geograficamente.
Se hai tutto in un singolo datacenter, lo puoi ridondare quanto ti pare, ma avrai sempre un SPOF che salta fuori dal nulla sul più bello, magari dopo 30 anni, ma non puoi garantire realmente il 100%.
Se così non fosse, i principali operatori mondiali o anche Microsoft, Google ed altri non costruirebbero sempre decine e decine di datacenter sparsi per il mondo. Se fosse solo per un problema di latenza, basterebbe 'affittare' spazi presso altri datacenter (e spesso lo fanno), non è necessario costruire il proprio partendo dai muri.

Poi scusa, come ha scritto giustamente Ste, il 50% dei downtime sono dati da problemi elettrici o macchinari che non partono.
Lascia pure che tra 10.000 operatori ci sia qualche cantinaro, ma quel cantinaro non fa media, se la metà dei problemi son di natura elettrica, va da se che un problema di fondo ci sarà. Oppure tutti gli operatori sono solo "chiacchere e distintivo"? a The Planet è scoppiato un trasformatore/UPS, altri hanno avuto problemi con i generatori.
Tutti cantinari? Non credo......

[tzm.net]

La ridondanza permette n livelli di guasto, più livelli di guasto vuoi sopportare, più aumentano i costi. Nel caso di Amazon potevano sopportare un solo livello di guasto e la rete elettrica di backup ha subito un guasto mentre era in riparazione la prima. Banalmente per le aree più critiche basterebbe mettere un'ups dentro l'armadio come ultima spiaggia. Non è pensabile però farlo su ampia scala data l'inefficienza elettrica del tutto.

[guest]

Su questo non c'è dubbio, ma spesso avere due location geograficamente separate ti da una ridondanza maggiore (e totale) a costi inferiori rispetto a ridondare tutto di tutto nella singola struttura.

Se i server di The Planet colpiti dallo scoppio fossero stati ubicati anche in un altra sala o struttura, il downtime sarebbe stato pari a zero, per quei clienti.
Se invece acquisti 10 server, tutti nella stessa sala o nello stesso rack, avrai ridondanza x10 sul singolo server, ma un evento imprevisto come lo scoppio di un qualche cosa o eventi simili non lo eviti.

(mettere i server in una sala separata dentro lo stesso datacenter si può già considerare ridondanza geografica, minima, ma pur sempre geografica.)

[ceccus]

Salve,

a The Planet è scoppiato un trasformatore/UPS, altri hanno avuto problemi con i generatori.

Cioè, da quelo che scrivi, secondo me , the planet è un cantinaro ... punto ... perchè con un guasto simile, non si possono fermare dei servizi ... poi, ognuno è liberissimo di pensarla come vuole.

Ciao !!

[guest]

Se la pensi così credo sia inutile proseguire ogni discorso.
The Planet è attualmente uno degli hoster più grandi al mondo nonchè uno dei più affidabili. Molti altri provider acquistano servizi da The Planet, definirli cantinari mi pare eccessivo.

Il succo della situazione è che senza una ridondanza geografica il 100% di disponibilità è impossibile da garantire. Tant'è che ogni contratto si tutela da cause di forza maggiore come guerre, terremoti, attacchi terroristici.
Te dici che basta fare una pianificazione accurata. E se per caso scoppiasse una conduttura del gas sotto il datacenter? Il titolare del datacenter non può prevenire una cosa simile. Potresti costruire il datacenter lontano dalle condutture, ma chi ti assicura che dopo 3 anni gli operatori del gas non facciano una diramazione a 10 metri da te?

Se un fulmine colpisse il datacenter? No, da un fulmine non ti proteggi perchè se fosse possibile 'smorzare' la carica di un fulmine sarebbe anche possibile costruire batterie in grado di immagazzinarne l'energia.
Puoi limitare i danni il più possibile, che è ben diverso da essere immuni.

Se vuoi avere il 100% di disponibilità ti devi dotare di una ridondanza geografica, c'è poco da fare.

[Ste]

Ma siamo andati abbastanza OT secondo me, rispetto al discorso originale Io vedo che la maggior parte dei problemi non sono a monte, sono nel dc, nel senso che riguardano problemi dell'hardware usato nella parte elettrica, come UPS, generatori e via dicendo, per cui in molti casi quel che dovrebbe essere la soluzione ad un guasto diviene un downtime ancora maggiore!