Incendio OVH a Strasburgo, digital-forum.it al momento non disponibile.
News inserita da: Simone Rossi (Satred)
Fonte: Digital-News (original)
UPDATE by Simone Rossi (18.03.2021 delle 23:00 ) | Da qualche minuto il provider OVH ha nuovamente dato energia al server digital-forum.it e per cui finalmente
Digital-Forum.it è tornato online
Vi ringraziamo per la pazienza avuta durante questi giorni di blackout del forum e la sentita partecipazione. Vi invitiamo ovviamente nuovamente su Digital-Forum.it ma in ogni caso ci piacerebbe continuare a leggere i vostri commenti anche a margine delle notizie presenti su Digital-News.it
UPDATE by Simone Rossi (18.03.2021 delle 12:00 ) | Ercolino scrive:
Aggiornamento da parte di OVH
Tutta la rete è configurata in SBG4.
I rack si stanno riavviando.
UPDATE by Simone Rossi (18.03.2021 delle 09:30 ) | Ercolino scrive:
Aggiornamento da parte di OVH - Ieri abbiamo testato il processo di riavvio dei rack con un piccolo team. Oggi stiamo iniziando a lavorare con più persone sul sito. Persone 24/24. Domani saremo a tutta velocità. Oggi stiamo testando la pulizia del processo in SBG3
UPDATE by Simone Rossi (17.03.2021 delle 14:20 ) | Ercolino scrive:
Nuovo bollettino del 17/03/2021 ore 13
Alimentazione SBG1/3/4:
20KV: OK
Trasfomatori: OK
Distribuzione elettrica bassa tensione: OK
UPS: OK
Fusibili: OK
Andiamo!! :)
Rete: Abbiamo riavviato la rete in SBG3. Dobbiamo ricostruire una parte della rete interna distrutta in SBG2. Abbiamo riavviato il primo rack in SBG1. Funziona bene. Continueremo.
Pulizia dei server: Abbiamo testato i server in SBG3: 1/3 di loro devono essere puliti. 2/3 può essere riavviato al più presto. La pulizia richiede 12-16 ore per server. Lo eseguiremo su tutti e 5 i piani, in parallelo. I test iniziano adesso.
Dobbiamo lavorare sulla rete in SBG4. Stiamo cercando un processo speciale per ripulire i server in SBG1 / 61E-62E. Alcuni server in SBG3 / Piano 5 presentano lo stesso problema.
Per riavviare pCC / HPC, abbiamo bisogno del pCC-Master che gestisce vSphere. 1/3 sono presenti, 2/3 devono essere ricostruiti. È un processo lungo che stiamo cercando di accelerare. Per riavviare OpenStack, dobbiamo ricostruire il piano di controllo del sistema operativo: <24 ore.
UPDATE by Simone Rossi (16.03.2021 delle 20:45)
UPDATE by Simone Rossi (16.03.2021 delle 19:15) | Ercolino scrive:
Tabella riepilogativa dello stato di ogni datacenter
Bollettino del 16/03/2021 ore 18:15
SBG-1
- Situazione: 4 camere su 12 sono state danneggiate
- Riavvio elettrico: Rialimentazione definitiva oggi, gli UPS danneggiati sono stati controllati e vengono sostituiti
- Riavvio della rete: Backbone: connessione temporanea a SBG il 15/03 e ridistribuzione della rete locale e configurazione oggi
- Riavvio dei server: ETA provvisorio lunedì 22 marzo per riavvio graduale
SBG-2
- Ubicazione: edificio fuori uso. Perizia strutturale svolta. Sito protetto.
- Restart of Servers: Sostituzione delle infrastrutture su altri data
center: Gravelines (GRA), Roubaix (RBX), Londra (LON), Varsavia (WAW),
Francoforte (FRA)
SBG-3
- Situazione: server non danneggiati
- Riavvio elettrico: Rialimentazione definitiva oggi, tutti gli inverter sono operativi
- Riavvio della rete: Nuova sala di rete attivata oggi e ridistribuzione della rete locale il 17/03
- Riavvio dei server: ETA provvisorio lunedì 22 marzo per riavvio graduale
SBG-4 (Il nostro)
- Situazione: vengono preservati tutti i piani e tutti i server
- Riavvio elettrico: Rialimentazione definitiva oggi
- Riavvio della rete: Ridistribuzione della rete locale oggi
- Riavvio dei server: ETA provvisorio lunedì 22 marzo per riavvio graduale
UPDATE by Simone Rossi (15.03.2021 delle 14:10) | Ercolino scrive:
Aggiornamento 15 marzo, ore 13 da parte del provider
Energia:
- 20KV in SBG1 è UP. 240V è UP.
- Stiamo riavviando UPS3 per la sala di rete A (SBG1).
- Stiamo lavorando su UPS2 + UPS4 per SBG4 ancora lavorando su 20KV in SBG3. Domani sará attivato.
- è iniziata la verifica dell'UPS in SBG3
Rete:
- fibre Sala A <> B in corso - La sala fibre A <> SBG1 / SBG4 verrà avviata al più presto
- fibre Sala A <> SBG3 Piano 1/2/3/4/5 in corso
- fibre Aula B <> SBG3 Piano 1/2/3/4/5 in corso
- La rete ottica FRA <> SBG è ATTIVA
- La rete ottica PAR <> SBG è in corso
- I router nella rete A sono attivi
- I router nella rete B sono presenti. aspettiamo per attivarli
Riavvio dei server
- i server in alcune stanze devono essere ripuliti a causa del fumo: almeno SBG3 / Floor4 + 5, SBG1 / 61E + 62E
- tutti gli altri server devono essere ispezionati per i rischi di inquinamento
- controllo del watercooling e poi si avvia il boot
UPDATE by Simone Rossi (14.03.2021 delle 14:00) | Ercolino scrive:
Comunicato da parte del provider OVH sul proseguimento dei lavori
Stiamo ancora lavorando al riavvio della rete ottica A in SBG1. Speriamo di avere la rete A UP oggi. Ci consentirà di ridistribuire gli strumenti interni a livello locale.
La ricostruzione della rete ottica B richiederà 2 giorni. Molte fibre devono essere collegate.
L'alimentazione a 240V in SBG1 è pronta per essere testata.
Domani l'alimentazione primaria a 20KV per SBG1 sarà attivata
I lavori per ripristinare l'alimentazione primaria a 20KV per SBG3 sono in corso. Ci vorranno 2 giorni.
Il sistema di raffreddamento a acqua per SBG1/3/4 è stato controllato ed è protetto. Sono in corso la pulizia e l'asciugatura.
Ci sono 60 tecnici che lavorano sul sito.
C'è ancora molto da fare, ma sta andando più veloce del previsto
Manteniamo lo stesso ETA e forse saremo più veloci.
UPDATE by Simone Rossi (13.03.2021 delle 20:00) | Ercolino scrive:
Caro utente, a causa del grave incendio che si è verificato nella notte tra il 9 e il 10 Marzo 2021 presso il datacenter OVH di Strasburgo, in questo momento il nostro Digital-Forum.it è momentaneamente offline.
Ci scusiamo per questo inconveniente ma volevamo rassicurarti che il server dedicato di questo forum è situato nel data center SBG4 che non è stato interessato dall'incendio e quindi non ci sono state perdite di dati, ma attualmente tale sistema è OFF line solamente perchè i tecnici OVH devono ricostruire la parte elettrica che lo alimenta e sfortunatamente per effettuare tali operazioni occorre ulteriore tempo.
Nel frattempo continuate a seguirci sui nostri social e soprattutto sul nostro portale dove potrete trovare tante news interessanti e novità. Vi invitiamo a partecipare alle varie discussioni commentando a margine le varie news inserite.
- DIGITAL-NEWS | Il Magazine dedicato alla TV Digitale | https://www.digital-news.it
- FACEBOOK - https://www.facebook.com/digitalsat
- TWITTER - https://twitter.com/digitalsat_it
- LINKEDIN - https://www.linkedin.com/company/685478/
- INSTAGRAM - https://www.instagram.com/digitalnews_it/
- YOUTUBE - https://www.youtube.com/user/satredvideo/
SEGUI GLI AGGIORNAMENTI SUL RIPRISTINO QUI:
UPDATE by Simone Rossi (13.03.2021 delle 10:15) | Ercolino scrive:
Buongiorno a tutti, come sapete il Datacenter di OVH a Strasburgo è stato coinvolto da un grosso incendio, dove SBG2 è stato completamente distrutto e SBG1 è stato danneggiato parzialmente. Fortunatamente il nostro server dedicato del forum è situato nel data center SBG4 che non è stato interessato dall'incendio, ma attualmente è OFF line perchè devono ricostruire la parte elettrica che lo alimenta e sfortunatamente ci andrà un po' di tempo. Il riavvio del data center SBG4 è previsto per Venerdi 19 Marzo (si spera anche prima) e ci vorranno fino a 2 giorni affinchè tutti i server siano UP. Nel frattempo continuate a seguirci sui nostri social e soprattutto sul nostro portale dove potete trovare tante news interessanti e novità.
UPDATE by Simone Rossi (12.03.2021 delle 12:00) | Ercolino scrive:
Comunicato da parte del nostro provider. Ricordo che il nostro server dedicato si trova in SBG4 che non è stato interessato dall'incendio
Purtroppo andrà un po' per le lunghe :(
Stiamo lavorando con gli esperti dell'assicurazione per ripotenziare SBG1 / 3/4 oggi dai generatori. L'obiettivo è verificare, stanza per stanza, attrezzatura per attrezzatura, che l'infrastruttura funzioni. Non ci aspettiamo di riavviare i server prima della prossima settimana. La nuova sala di rete (B) + 20KV per SBG3 è stata assemblata e sarà in viaggio questa notte, a lato domani. Quindi, iniziamo a collegarli. Prenderanno in consegna i generatori SBG3 da ven. Verifichiamo 20KV + 240V in SBG1 / SBG4 per rilevare i generatori entro martedì Inizieremo il repowering di SBG1 / SBG4 entro la fine della prossima settimana, venerdì 19. Ci vorranno 2 giorni per avere tutti i server UP. Inizieremo il repowering di SBG3 entro la metà della prossima settimana, mercoledì 17, ci vorranno 6-8 giorni per avere tutti i server UP
UPDATE by Simone Rossi (11.03.2021 delle 17:25)
UPDATE by Simone Rossi (10.03.2021 delle 21:40) OVH comunica che le loro squadre tecniche stanno facendo il massimo per rimettere in funzione la struttura di Strasburgo. Un nuovo bollettino della situazione sarà diffuso domani, giovedì 11 Marzo alle ore 10:30.
UPDATE by Simone Rossi (10.03.2021 delle 19:00) Vi segnaliamo il seguente link dove è possibile seguire in tempo reale lo svolgimento dei lavori in corso in OVH: http://travaux.ovh.net/?do=details&id=49484
UPDATE by Simone Rossi (10.03.2021 delle 17:30): Come comunicato direttamente attraverso il profilo Twitter di Octave Klaba (fondatore di OVHcloud), l'azienda francese ha messo in atto i piani di emergenza relativamente all'incendio avvenuto stanotte. Ricordiamo che il server dedicato a digital-forum.it è ubicato presso il datacenter SBG4 che non è stato coinvolto nell'incendio, ma ovviamente attualmente tutto l'intero complesso di Strasburgo è Offline, per la verifica e il ripristino dei vari servizi di Infrastruttura. Ci scusiamo nuovamente per quanto accaduto e si prevede una risoluzione del problema entro lunedì 15 Marzo.
UPDATE by Simone Rossi (10.03.2021 delle 15:35): COMUNICATO STAMPA UFFICIALE - Mercoledì 10 marzo 2021, alle 00:47, si è verificato un incendio in una sala di uno dei nostri 4 datacenter di Strasburgo, SBG2. Precisiamo che il sito non è classificato come Seveso.
I vigili del fuoco sono immediatamente intervenuti sul posto per proteggere le squadre di intervento e limitare l'aumento dell'incendio. A partire dalle ore 2.54, il sito e il suo perimetro sono stati completamente isolati. Alle 4:09, il fuoco ha distrutto SBG2 e continuava a presentare rischi per i datacenter vicini fino a quando i pompieri non hanno preso il controllo completo dell'incendio. A partire dalle 5:30, il sito è stato interdetto ai nostri team per ovvie ragioni di sicurezza e sotto la guida della prefettura, l’incendio è stato ufficialmente limitato. Siamo lieti che non ci siano feriti, né tra i nostri team né tra i vigili del fuoco e tra il personale della prefettura, che ringraziamo per l’esemplare mobilitazione al nostro fianco.
Grazie al parco operativo di 15 datacenter in tutta Europa, i nostri team tecnici e commerciali sono totalmente dedicati ai clienti per implementare soluzioni e rimediare all'indisponibilità del sito di Strasburgo. Il nostro compito adesso è di offrire ai nostri clienti una qualità di servizio ottimale per continuare a garantire le attività online, pienamente consapevoli di quanto queste siano importanti. Ci scusiamo per le difficoltà che questo incendio ha causato, e ci impegniamo a comunicare con la massima trasparenza le cause che lo hanno generato e le relative conseguenze.
Stiamo valutando l'impatto dell’incidente e comunicheremo quanto prima, con la massima trasparenza, lo stato di avanzamento delle analisi e l'attuazione delle soluzioni.
Tutti i nostri canali di comunicazione, a partire dalla piattaforma di monitoraggio degli incidenti travaux.ovh.com, incluso il task), sono accessibili e aggiornati in tempo reale.
A causa di un grave incendio avvenuto questa notte nel datacenter OVH di Strasburgo, il server di digital-forum.it è attualmente offline. Secondo quanto riportano le agenzie di stampa per domare tale incendio è stato necessario l'intervento di più di 100 vigili del fuoco. Fortunatamente non si segnalano feriti ma i danni sono ingenti.
L'incendio, scoppiato intorno all'1 del mattino e circoscritto intorno alle 7, ha visto mobilitati un centinaio di vigili del fuoco nel distretto di Port du Rhin, a est del capoluogo alsaziano, non lontano dal confine tedesco. La prefettura ha escluso che ci siano state vittime. «Tutti sono sani e salvi», ha twittato Octave Klaba, il fondatore di OVHcloud. I vigili del fuoco hanno lavorato per impedire che l'incendio, che si è diffuso attraverso un edificio di 4 piani che ospitava i server, si propagasse ad altri edifici. Nonostante una grande nuvola di fumo, non è stato rilevato alcun inquinamento tossico nel sito industriale.
Il datacenter OVH di Strasburgo si compone di quattro unità la SBG1 che sembra sia stata parzialmente distrutta, la SBG2 che appare completamente distrutta, mentre la SBG4 dove è presente il server dedicato a digital-forum.it non dovrebbe aver subito impatti dall'incendio ma le indagini sono tutt'ora in corso.
A scopo precauzionale è stato tolto l'utilizzo dell'impianto elettrico a tutta la struttura e per questo motivo probabilmente per la giornata di oggi non sarà possibile accedere a digital-forum.it
Nessun problema invece presenta l'accesso a Digital-News.it in quanto l'hosting di questo sito è presente in Italia presso la webfarm Aruba.
Scusandoci per il disservizio con i nostri utenti nel caso ci fossero ulteriori aggiornamenti sulla vicenda ve li foriremo su Digital-News.it e sui vari canali social.
