Ticket info
| Ticket number | 19233 |
| Context | NOC-NetworkServices |
| Ticket Status | Close |
| Ticket Source | GARR |
| Ticket Type | Incident |
| Ticket open time | 09/11/2017 08:19 |
| Ticket close time | 22/03/2018 09:35 |
| Problem description | Allagamento PoP Bologna-Morassutti. |
| Problem fixer | GARR |
| Problem fix | |
| Problem start | 09/11/2017 07:15 |
| Problem end | |
| Subject | Allagamento PoP Bologna-Morassutti |
| Affected Link | AFAM-Bologna (BO) Accademia Belle Arti -- Regione Emilia-Romagna Lepida Aggregazione scuole Regione Emilia-Romagna Lepida CNR - Faenza (RA) - PoP Bologna-Morassutti ENEA - Faenza -- PoP Bologna-Morassutti ICRANET-Pescara -- PoP GARR Bologna Morassutti INGV - Bologna -- PoP Bologna-Morassutti IUE - Fiesole -- PoP Bologna-Morassutti backup KHI - Firenze -- PoP Bologna-Morassutti backup Peering Acantho - Bologna Peering Regione Emilia-Romagna Lepida PoP-FI1 -- PoP-BO1_backup-via-FI3 PoP-UR -- PoP-BO1 RE1-FE -- RX1-BO1 RX1.BO1 -- RX2.MI1 RX1.PD2 -- RX1.BO1 RX2-BO1 -- RX1-BO1 RX2.BA1 -- RX1.BO1 SUM - Firenze -- PoP Bologna-Morassutti backup VCONF |
| Affected Service | AFAM-Urbino (PS) Accademia Belle Arti AFAM-Urbino (PS) ISIA Acantho - Bologna CINECA - Casalecchio di Reno (BO) CMCC - Bologna CNR - AdR Bologna CNR - IMEM Parma CREA - Bologna (ex-CRA) ENEA - Bologna ENEA - Brasimone (BO) ENEA - Faenza (RA) ICRANet - Pescara INAF - IRA Medicina Metrologia (BO) INAF-eVLBI IRA Bologna INFN - Bologna INFN - CNAF - Bologna INFN - CNAF - Bologna - Corporate Cloud INFN - LNGS - Assergi (AQ) INFN - Parma INGV - Bologna PSIC837002 - Istituto Comprensivo Statale "P. Volponi"- Urbino (PU) PSPC018014 - Liceo Classico Raffaello - Urbino (PU) PSPS050002 - Liceo Scientifico Laurana-Baldi - Urbino (PU) PSTF01000N - ITIS Mattei - Urbino (PU) Regione Emilia-Romagna Lepida - Bologna UNI-Bologna UNI-Bologna - Johns Hopkins UNI-Chieti - sede di Pescara UNI-Ferrara UNI-Modena UNI-Parma UNI-Urbino e2e LENS Neuroanatomia - CINECA |
| History | 09/11/2017 08:19 Aperto ticket. 13/11/2017 12:38 Venerdì si è provveduto a rimuovere l'acqua presso il PoP di Bologna Morassutti. Installato e configurato un apparato temporaneo presso una sala posta al piano superiore. Nella giornata di oggi (Lunedì) è programmata la sostituzione delle schede/ventole c/o i dispositivi parzialmente sommersi. Attualmente non è possibile effettuare il ripristino completo dell'alimentazione per la riaccensione totale di tutti gli operatori. Servizi ripristinati su circuiti temporanei: - UNI-Modena - UNI-Parma + CNR Parma + INFN Parma - ICRANET - INAF-Medicina - INFN-CNAF Bologna - INFN Sez. Bologna PoP Urbino In attesa di verifica da parte dell'operatore per gli apparati Telecom presso il PoP di Bologna-Morassuti. Ticket di riferimento # 19240 15/11/2017 07:50 Riconfigurati tutti i circuiti utente sul router del PoP di BO1 in attesa di poter riaccendere anche il secondo router. 13/12/2017 18:29 Situazione Ambientale: L'acqua, che aveva invaso i locali del Tier 1 e del PoP è stata rimossa, i locali sono stati puliti, ma non bonificati. Prevista verifica dei filtri dei dispositivi. Situazione Elettrica: Il 18/12 è previsto il ripristino di una delle due linee primarie del CNAF in modalità non protetta. Il 13/12 dovrebbero arrivare i nuovi interruttori che permetteranno il ripristino di parte di un quadro. In fase di valutazione il noleggio di un UPS per dare continuità alla linea che verrà ripristinata (per il quadro UPS danneggiato ci vorranno circa 8 settimane). Situazione Condizionamento: Il condizionamento è spento, inutilizzabile per adesso. Attualmente si sta utilizzando l'aria esterna, non trattata, per mantenere gli apparati ad una temperatura accettabile. Sono attivi e funzionanti apparecchi di deumidificazione in tutte le sale per mantenere sotto controllo l'umidità. 12/02/2018 08:50 Ripristino di un quadro elettrico e messa in esercizio dell'UPS e gruppo elettrogeno di produzione. [Maintenance #19528] 22/03/2018 09:35 - Alimentazione elettrica: La linea Rossa protetta da un UPS da 300kW (PoP GARR e sala 1). Dal 20/02 l'alimentazione sulla linea verde e' stata ripristinata come prima dell'allagamento (continuità data da gruppo rotante e Diesel). Tutti gli apparati bi-alimentati sono collegati alle linee Rossa e Verde. Tutti gli apparati mono-alimentati sono collegati alla linea rossa. - La cache di Google (sala 2): Attualmente e' collegata solo alla linea verde e la parte collegata alla linea rossa non e' ancora accesa. In attesa di aggiornamenti per fornire la seconda alimentazione. - Cache Akamai (sala1): Costituita da macchine mono-alimentate una parte collegate su una linea e la parte restante sulla linea rossa. I attesa di ricevere aggiornamenti da AKAMAI sulle attività da completare. - Rack2 PoP GARR (Rack che conteneva l'M320 e i perfsonar) I dispositivi sostituiti saranno preparati per lo smaltimento. - Rack Infracom: E' stato ripulito del tutto. - Stato Magazzino: In attesa di aggiornare l'elenco delle ottiche e dello stato del materiale che ha preso acqua. |
| Problem type | Fault |