Guasto sistema risoluzione interno
28/01/2025 ore 14:50
A seguito di un guasto nei sistemi di risoluzione interna del nostro datacenter di Milano, i nostri sistemi di posta e alcuni sistemi web non sono raggiungibili
28/01/2025 ore 16:30
Il guasto è stato identificato e risolto. I sistemi hanno ripreso a funzionare correttamente.
La posta in ingresso che non è stata recapitata durante il periodo di fermo è rimasta accodata sui nostri sistemi di backup esterni ed è stata regolarmente consegnata al ripristino dei sistemi
Problemi di consegna posta (risolto)
Da questa mattina ci risulta difficoltoso consegnare le mail ai domini che si appoggiano a Office365.
Da quanto possiamo vedere sui logs dei server di posta, vengono rifiutate le mail con più di un destinatario
2AF28A3A3F 51075 Wed Oct 11 12:55:00 xxxxxxxx@xxxxxxxxx.it
(host yyyyyyyyyy.mail.protection.outlook.com[52.101.68.21] said: 452 4.5.3 Too many recipients (AS780090) [DU6PEPF0000A7E1.eurprd02.prod.outlook.com 2023-10-11T14:33:58.593Z 08DBC92F5C76D55D] (in reply to RCPT TO command))
yyyyyyyyyy@yyyyyyyyyy.com
zzzzzzzzz@yyyyyyyyyy.com
In questo esempio riportato dai nostri logs la mail è stata rifiutata per troppi destinatari e questi erano solo due. Riteniamo che dopo una serie di errori, il server mittente venga poi bannato.
Si tiene monitorata la situazione
Aggiornamento 12/10/2023 10:53
Verso la sera del giorno 11/10/2023 il problema sembra sia rientrato. Le mail hanno ripreso ad essere accettate regolarmente.
Ad ora non si sono più rilevati problemi
Migrazione servizi
In data 12.08 alle ore 18:00 i servizi da noi erogati verranno temporaneamente interrotti per manutenzione. Si prevede che le attività riprenderanno correttamente entro le ore 08:00 del 13.08
- 17:40 – controlli prima dell’inizio delle attività di migrazione
- 18:00 – inizio spegnimento servizi
- 24:00 – inizio ripristino servizi
- 04:00 – riconfigurazione servizi
- 06:00 – ripristino servizi effettuato
Attività in datacenter
Nella giornata di Venerdì 28.01.2022 verrà effettuata un’attività sistemistica nel nostro datacenter. Tale attività prevede lo spegnimento di uno dei nodi per poter effettuare un’attività di revisione di un componente hardware del nodo stesso, tale attività si rende necessaria al fine di evitare possibili anomalie.
Le attività inizieranno nella mattinata con lo spostamento delle VM presenti su tale nodo. Alle ore 15 il nodo verrà spento per l’attività di revisione e una volta terminata tale attività riavviato e reinserito nel cluster. Una volta verificato il corretto funzionamento le VM verranno nuovamente migrate sul nodo. Non sono previsti disservizi.
28.01.2022 09:00: inizio attività migrazione VM
28.01.2022 11:40: terminate attività di migrazione delle VM
28.01.2022 15:00: fermo del nodo
28.01.2022 16:30: riattivazione del nodo
28.01.2022 16:45: un problema di sincronizzazione ha fermato il database di gestione della posta
28.01.2022 18:00: il problema sul Db di posta è stato risolto. Il problema hardware sul nodo, nonostante la sostituzione delle componenti, non è stato risulto. Si rinvia l’attività di analisi al 31.01.2022
31.01.2022 11:00: durante le analisi si è manifestato un problema di infrastruttura, i tecnici stanno lavorando per la sua risoluzione
Sistema instabile
Apertura: in data 12.01.2022 dalle ore 12.30 circa, un problema sul datastore ha impattato sulle performance dell’intero sistema creando forti latenze nell’accesso ai dischi. Questo ha fortemente rallentato l’accesso ai databases e anche ai files.
I tecnici del supporto della piattaforma di virtualizzazione, immediatamente contattati, hanno analizzato il problema per quasi tutto il pomeriggio creando un workaround verso le 17.30 e ristabilendo così le normali funzionalità del sistema.
Aggiornamento: nella giornata di oggi 13.01.2022 sono riprese le attività di analisi da parte del team di R&D per meglio comprendere la causa dell’anomalia. Non sono previste attività che possano impattare sul corretto funzionamento del sistema.
Chiusura: nella giornata del 14.01.2022 il sistema è stato ripristinato