We are aware of a potentially service impacting issue. Dettagli
Manutenzione ed aggiornamenti servers (Risolto) Alto

Influenzando Altro - WZ2 - WZ3 - WZ6 - NRF1 - NR12

  • 05/10/2021 20:26 - 13/10/2021 09:43
  • Ultimo Aggiornamento 05/10/2021 20:29

Nella notte tra il 5 ed il 6 di ottobre verranno effettuati degli aggiornamenti sui server in oggetto per migliorare ulteriormente sicurezza e stabilità.

Durante l'aggiornamento i servizi verranno riavviati.

E' previsto un downtime di non oltre 60 secondi


 

Manutenzione programmata servers WZ2 - WZ3 - EFFETTUATA (Risolto) Medio

Influenzando Altro - WZ2 - WZ3

  • 17/09/2021 11:09 - 05/10/2021 20:26
  • Ultimo Aggiornamento 19/09/2021 05:04

Al fine di risolvere definitivamente alcuni problemi che da qualche giorno creano diversi CRASH della piattaforma Wowza, i tecnici di Wowza stanno lavorando per isolare i bug e risolverli.

La maggior parte dei lavori vengono eseguiti in orario notturno per impattare in modo minore sui servizi in produzione.

Contiamo di riuscire ad isolare e risolvere i problemi entro 2/3 giorni.

Ci scusiamo per le eventuali interruzioni che stanno avvenendo in modo casuale in questi giorni.


Nelle notti del 18 e 19 settembre abbiamo applicato le modifiche e gli aggiornamenti che ci sono stati comunicati dai programmatori del pannello MediaCP e Wowza Streaming Engine.

Ora vediamo nelle prossime ore/giorni se i problemi sono stati risolti.


 

Manutenzione NRF1 - Terminata (Risolto) Alto

Influenzando Server - NRF 1

  • 15/09/2021 00:21 - 17/09/2021 11:09
  • Ultimo Aggiornamento 15/09/2021 01:49

E' in corso una manutenzione programmata del server NRF1.

I servizi di streaming gratuiti sono al momento non raggiungibili.


Il server NRF1 è tornato disponibile e tutti i servizi attivi.


 

MBcloud-216 non raggiungibile - RISOLTO (Risolto) Critico

Influenzando Altro - MBCloud-216

  • 12/08/2021 11:53 - 13/08/2021 10:47
  • Ultimo Aggiornamento 12/08/2021 13:24

Il servizio MBStudio Cloud 216 è attualmente irraggiungibile.

I tecnici sono già al lavoro per la risoluzione del problema.


La riparazione è ancora in lavorazione:

http://travaux.ovh.net/?do=details&id=52588&


Il servizio è tornato disponibile.


 

MBcloud-216 non raggiungibile - RISOLTO (Risolto) Critico

Influenzando Altro - MBCloud-216

  • 25/07/2021 10:09 - 27/07/2021 09:52
  • Ultimo Aggiornamento 25/07/2021 10:29

Il servizio MBCloud-216 non è attualmente raggiungibile.

I tecnici sono al lavoro per il ripristino.


RISOLTO - Il server è stato ripristinato ed i servizi riavviati.


 

Manutenzione straordinaria WZ2 (Risolto) Critico

Influenzando Server - WZ2

  • 15/07/2021 02:39 - 25/07/2021 10:05
  • Ultimo Aggiornamento 20/07/2021 00:57

A causa di un attacco hacker pericolosissimo sul server WZ2, è in corso una migrazione straordinaria dei servizi.


La migrazione dei servizi è stata terminata in data 16/07/2021.

Stiamo ancora indagando su alcune configurazioni che saltuariamente stanno fermando alcuni servizi per tempi brevi.

Non appena isolato il problema chiuderemo questo avviso.


 

Manutenzione straordinaria WZ3 (conclusa) (Risolto) Critico

Influenzando Server - WZ3

  • 13/07/2021 01:47 - 20/07/2021 00:53
  • Ultimo Aggiornamento 13/07/2021 04:35

A causa di un attacco hacker pericolosissimo sul server WZ3, è in corso una migrazione straordinaria dei servizi.

Stiamo lavorando per ripristinare i servizi nel più breve tempo possibile.


I servizi sono stati ripristinati correttamente.

A causa della manutenzione eseguita in molti casi alcuni dati statistici del passato sono andati persi (perchè infettati dall'operazione di hackeraggio effettuata da ignoti).


 

Ripristino IP server NR9 nella notte tra 8 e 9 luglio. (Risolto) Critico

Influenzando Server - nr9

  • 08/07/2021 11:20 - 13/07/2021 04:32
  • Ultimo Aggiornamento 13/07/2021 04:32

Dopo oltre 15 giorni di verifica, possiamo ritenere che la problematica sull' IP bloccato di NR9 sia completamente rientrata.

Nella notte tra il giorno 8 ed il 9 di luglio verrà ripristinato su NR9 il vecchio e solito IP da sempre utilizzato.

L'operazione sarà completamente trasparente per tutti i clienti che non dovranno fare nulla nelle configurazioni.

Sarà solo possibile una micro interruzione sull'encoder nella nottata di meno di 1 secondo.

Saluti

 

Parziale irraggiungibilità del server NR9 (RISOLTO) (Risolto) Critico

Influenzando Server - nr9

  • 23/06/2021 09:36 - 08/07/2021 11:19
  • Ultimo Aggiornamento 25/06/2021 12:22

Il server NR9 sta perfettamente funzionando ma alcuni provider italiani ne stanno bloccando l'accesso.

Questa notte un potente attacco hacker ha interessato alcuni indirizzi IP adiacenti all'indirizzo del server NR9.

Nonostante l'indirizzo IP del server NR9 (178.32.140.82) non sia assolutamente coinvolto nell'attacco, sembrerebbe che alcuni provider italiani abbiano messo in blacklist un intero blocco di 256 IP che non sono più raggiungibili dalla loro rete.

Per spiegare meglio:
immaginate un condominio di 256 appartamenti.  In uno di questi appartamenti viene commesso un omicidio.
Arriva la polizia e per sicurezza blocca l'ingresso a tutto il palazzo e non solo quell'appartamento.

Stiamo verificando con il provider la situazione per prendere le misure necessarie per risolvere il problema.

Prossime informazioni qui.


In attesa di risposta dalle autorità competenti, abbiamo aggiunto un IP sull'indirizzo nr9.newradio.it.

Bisogna attendere la propagazione DNS e dovrebbe pian piano ritornare raggiungibile dai provider che stanno bloccando il vecchio IP.

Occorre attendere


I servizi sono online da questa mattina su un IP di emergenza. 
siamo in attesa dello sblocco dell’IP da parte delle autorità competenti per ripristinare i servizi nella normalità. 


Aggiornamento del 25/6/2021:
la scorsa notte il blocco di routing internazionale sull'indirizzo 178.32.140.82 è stato sbloccato ed è quindi nuovamente raggiungibile dall'Italia.

Per questioni di sicurezza manteniamo ancora per qualche giorno il 'doppio' IP sul server. Non appena avremo la certezza della stabilità rispristineremo solamente l'IP originale di nr9.newradio.it.


 

Piano di Disaster Recovery (Risolto) Alto

Influenzando Altro - Tutti i servizi

  • 01/04/2021 11:58 - 18/04/2021 23:21
  • Ultimo Aggiornamento 01/04/2021 11:59

Dopo il gravissimo incidente avvenuto il 10 marzo a Strasburgo che ha mandato in cenere un intero edificio del datacenter SBG2 di OVH e danneggiato quello vicino SBG1, si è parlato molto online della sicurezza dei dati anche sulle cosidette piattaforme 'Cloud' che, di fatto, non hanno restituito una vera ridondanza dei dati nel caso che i servizi ed i server dell'infrastruttura fosse presente in un solo datacenter.

La nostra società è riuscita ad avere un danno su solo il 20% dei dati (che sono andati persi completamente) perchè il rimanente 80% era stato copiato in sicurezza su un'altra macchina in un altro datacenter.

Alla luce dell'accaduto abbiamo deciso di cambiare completamente la nostra strategia di backup dei dati aziendali e dei nostri clienti, per riuscire ad organizzare un piano di Disaster Recovery funzionale e senza sorprese.

Abbiamo cercato di rendere le cose molto semplici ed efficaci:

Abbiamo creato un file system distribuito di numerosi terabyte ridondato su 3 datacenter (2 in Europa ed uno in California)

Su questo file system (come un enorme hard disk online distribuito su 3 punti diversi del mondo) vengono effettuati ogni notte (ed in alcuni casi più volte al giorno) una copia di backup di tutti i dati necessari alla ricostruzione totale della maggioranza dei nostri servizi.

Questo ci permetterà in ogni momento, in caso di danni ad un server fisico o cloud, di poterlo ricostruire in tempi brevi senza la perdita di dati sensibili.

Abbiamo organizzato il piano in modo sicuro e semplice per rendere facile anche la scrittura dei backup ed il recupero dei dati.

In pratica abbiamo realizzato in modo distribuito e più completo quello che già era presente prima dell'incendio, ma limitato solo ad alcuni servizi e senza ridondanza.

Cerchiamo ogni giorno di trovare delle soluzioni che possano rendere i nostri servizi sempre più sicuri per i nostri clienti e sicuramente l'imprevisto incendio del datacenter di Strasburgo è servito ulteriormente a sensibilizzare i nostri tecnici ed invitarli ad accellerare tutte le operazioni di sicurezza che erano in cantiere ma che non erano ancora state rese operative in modo definitivo.

Chi potrà beneficiare del backup di sicurezza dei servizi Newradio ?

  • Tutti i clienti dei servizi di streaming Audio e Video in modalità LIVE
  • Tutti i clienti di Easy Radio (autoDJ) e Easy TV (autoDJ Video)
    (il backup crea una copia anche dei contenuti)
  • Tutti i clienti di Easy VOD (contenuti video on demand)
    (il backup crea una copia anche dei contenuti)
  • Gli utilizzatori di PLAY5
    (che  purtroppo nella sventura dell'incendio di strasburgo è stata la falla di dati più pesante da ricostruire)
  • Gli utilizzatori delle nostre APP
  • Gli utenti di MB Studio Cloud
    (se hanno sottoscritto l'opzione di backup automatico)

Per qualsiasi informazione e approfondimento sull'argomento non esitate a contattare il nostro servizio clienti.

PLAY5 in manutenzione (terminata) (Risolto) Critico

Influenzando Altro - Server PLAY5

  • 30/03/2021 01:15 - 18/04/2021 23:21
  • Ultimo Aggiornamento 30/03/2021 01:36

Stiamo potenziando PLAY5. Il server rimarrà non raggiungibile per alcuni minuti.


Il potenziamento e manutenzione del server di PLAY5 sono terminati.


 

SITUAZIONE AL 20/03/2021 (Risolto) Critico

Influenzando Altro - Informazioni su riattivazione servizi su Strasburgo.

  • 20/03/2021 10:16 - 18/04/2021 23:21
  • Ultimo Aggiornamento 20/03/2021 11:14

Nella giornata di ieri era iniziata la riattivazione graduale dei dei server nei datacenter di Strasburgo rimasti integri. 
Alle ore 18 circa del fumo era stato localizzato in un locale batterie non utilizzato in SBG1. Probabilmente l’incendio della scorsa settimana ha danneggiato parzialmente alcune batterie di questa stanza e quindi è stato deciso di togliere la corrente a tutto il datacenter e rimuovere completamente il contenuto di questa stanza che non è necessaria per la riattivazione del datacenter. 
nel momento in cui scrivo (11.00) é ripresa la riattivazione dei server da SGB3. 
questo imprevisto farà esclusivamente tardare di 24 ore il processo di riattivazione dei 3 datacenter. 
Ricordiamo che i pochi servizi che sono rimasti fermi (la maggior parte sono stati migrati su altri datacenter, sono tutti su SBG3 e quindi in progressiva riattivazione. 

SITUAZIONE AL 18/03/2021 (Risolto) Critico

Influenzando Altro - Informativa su lavori e riattivazioni

  • 18/03/2021 09:36 - 18/04/2021 23:21
  • Ultimo Aggiornamento 18/03/2021 09:46

Ieri sera una buona notizia (da prendere comunque con le dovute precauzioni):

La riattivazione dei servi 'recuperabili' relativi alla nostra infrastruttura potrebbe essere anticipata da lunedì 22 al venerdì 19.

Questo significa che potrebbe anche incominciare già da domani (19 marzo) la progressiva riapertura dei servizi fermi.
Non aspettatevi che tutto riparta di colpo. OVH ha comunicato che la riattivazione dei server sarà progressiva. Però l'anticipo di 3 giorni è sicuramente una cosa positiva.

Per quanto ci riguarda le macchine di streaming sono state TUTTE (audio e video) sostituite con delle nuove in datacenter differenti.
L'unica macchina che contiamo di rimettere in produzione è NR9 (che è attualmente attivo in una istanza di emergenza).

Il cambio, se sarà effettuato, sarà completamente trasparente per le radio interessate.

La riattivazione dei server sarà invece positiva per tutti gli MBCloud che hanno scelto di aspettare la riattivazione piuttosto che ripartire da capo con una nuova istanza (cosa che alcuni hanno fatto)

Nella giornata di oggi continuiamo incessantemente a lavorare sulla risincronizzazione di PLAY5 che ancora contiene alcuni player che potrebbero avere link o numeri sbagliati.
Su questo un vostro aiuto sarà prezioso nel caso doveste notare qualche incongruenza sul vostro player pubblicato

Infine la riattivazione interesserà anche alcuni piani di hosting rimasti nella condizione di 'recuperabilità'.


 

SITUAZIONE AL 17/03/2021 (Risolto) Critico

Influenzando Altro - Informativa su lavori e riattivazioni

  • 17/03/2021 08:55 - 18/04/2021 23:21
  • Ultimo Aggiornamento 17/03/2021 09:16

I principali servizi di streaming sono oramai nuovamente operativi da alcuni giorni sui nuovi server che sono stati creati dopo l'incidente della settimana scorsa.

Rimangono ancora in sospeso:

  • Alcune istanze di MBCloud
    secondo OVH saranno recuperabili a partire dal 15/03 (in progressiva riattivazione).
    Se non avete ricevuto una nostra mail che comunica la perdita TOTALE del vostro servizio MBCloud, siete tra coloro che probabilmente avranno il servizio recuperabile con tutti i dati.
    Se i clienti ancora fermi non intendessero aspettare la riattivazione, possono richiedere l'attivazione (gratuita) di una nuova istanza di MBCloud (consegnabile in poche ore) naturalmente vuota ma collegabile al servizio di streaming precedente (che comunque è attivo)
  • Alcune istanze di EASY RADIO presenti sui derver NR2, NR3, NR4 e NR7 (fortunatamente pochissime)
    Nonostante i server siano disponibili, non sarà possibile recuperare i dati di canzoni e playlist.
    E' possibile la riattivazione degli EASY RADIO con stesso indirizzo e porta ma senza contenuti. Occorrerà riprogrammarlo nuovamente.
  • Alcune istanze di EASY TV presenti sui server WZ2 e WZ3
    Nonostante i server siano disponibili, non sarà possibile recuperare i dati di video e playlist.
    E' possibile la riattivazione degli EASY TV con stesso indirizzo e porta ma senza contenuti. Occorrerà riprogrammarlo nuovamente.
  • Il servizio di Player HTML5, nonostante sia stato uno dei primi servizi ripartiti dopo l'incendio, soffre di una grave problematica di recuperodi alcuni dati.
    Di ora in ora stiamocontrollando tutti i player che siano configurati correttamente.
    Su questo potete darci una mano anche voi comunicandoci eventuali problemi aprendo un ticket di supporto tecnico.

Stiamo inessantemente lavorando per riallineare tutti i nostri servizi ancora fermi o con problemi.


 

SITUAZIONE AL 15/03/2021 (Risolto) Critico

Influenzando Altro - Informativa su lavori e riattivazioni

  • 15/03/2021 23:23 - 18/04/2021 23:21
  • Ultimo Aggiornamento 15/03/2021 23:41

La giornata del 15/03 è trascorsa lavorando sull'attivazione di alcuni servizi rimanenti e l'ottimizzazione delle piattaforme appena ricreate.

Siamo molto contenti della nostra decisione immediata presa dopo poche ore dall'incendio di non aspettare la riattivazione dei servizi ma di ricreare i servizi da zero, permettendoci di riuscire a rimmettere on-line i servizi distrutti in tempi da record.

Confermiamo che OVH ha oggi confermato che i servizi recuperabili saranno probabilmente resi nuovamente disponibili a partire dal giorno 22. Sarebbe stato un po' troppo fare aspettare così tanto migliaia di clienti.

La nostra decisione è quella di non riutilizzare la maggior parte dei servizi che saranno ripristinati ma di mantenere le nuove riattivazioni che sono state fatte in altro datacenter e con macchine e risorse più potenti e nuove rispetto alle precedenti.

Alla fine di questa avventura, su migliaia di clienti, solamente 6 hanno avuto delle perdite consistenti e irrecuperabili. Parliamo di 1 solo sito web e n.3 istanze di MB Cloud.

Il problema più grosso che stiamo affrontando in queste ore è la sistemazione del database del nostro PLAYER HTML5 PLAY5.

Nonostante che il motore de player sia stato ricostruito in poche ore dal disastro, il database e le sue copie sono andate irremidiabilmente distrutte. Abbiamo trovato solo una copia che risale a circa 12 mesi fa.

Significa che stiamo ricostruendo manualmente player per player (e sono oltre 3000), in particolare quelli consegnati o variati nell'ultimo anno.
Non esitate a comunicarci tramite ticket eventuali problemi o incongruenze sui vostri player. Cercheremo, nell'arco di ancora qualche giorno, di ripristinare il database con tutti i dati corretti.


 

 

SITUAZIONE AL 14/03/2020 (Risolto) Critico

Influenzando Altro - Informativa su lavori e riattivazioni

  • 14/03/2021 08:36 - 18/04/2021 23:21
  • Ultimo Aggiornamento 14/03/2021 09:29

Nella nottata sono arrivate delle comunicazioni più precise sulla situazione dei danni sul datacenter di Strasburgo che ci permettono di interpretare meglio la situazione.

E' oramai chiaro che parte della nostra infrastruttura Cloud che si appoggiava a SBG2 (andato completamente distrutto) è quasi del tutto irrecuperabile. Questo perchè anche buona parte dei backup delle istanze risultano irrecuperabili perchè si trovavano nel datacenter SBG1 anch'esso distrutto al 30/40%.

Alla luce di queste notizie possiamo intanto essere soddisfatti della nostra decisione di non aspettare di vedere cosa fosse recuperabile ed invece da subito lavorare per una ricostruzione ex-novo dell'infrastruttura su altri datacenter.

Riassumendo (se non arrivassero altre notizie, compresi miracoli):

  • I vecchi server audio NR2, NR3, NR4 e NR7 sono irrecuperabili.
    Nonostante siano stati rimessi in funzione nei giorni scorsi con delle nuove istanze, non sarà possibile recuperare i dati di alcuni AutoDJ (EASY RADIO) che erano presenti su questi server (brani musicali e files audio in genere).
    - I clienti con servizi LIVE sono stati tutti riattivati sui nuovi server NR2, NR3, NR4 e NR7.
    - I clienti con Easy Radio o AutoDJ saranno attivati al più presto ma dovranno ricaricare tutti i contenuti e le playlist (oppure rinunciare al servizio).
  • I vecchi server video WZ2, WZ3 e WZ5 sono irrecuperabili.
    - Abbiamo già sostituito i server con dei nuovi WZ2, WZ3 e WZ5 (anche più performanti) e riattivato tutti i servizi LIVE
    - I clienti con EasyTV (autoDJ Video) e Video On Demand (VOD) saranno attivati al più presto ma dovranno ricaricare tutti i contenuti e le playlist (oppure rinunciare al servizio).
  • Il server del player PLAY5 è irrecuperabile
    Abbiamo approntato quasi subito un server PLAY5 di emergenza ma il database disponibile era vecchio di qualche mese. Questo sta comportando la sistemazione manuale di alcuni player che potrebbero essere non aggiornati o persi. Su questo possiamo garantire il recupero totale nei prossimi giorni
  • Il servizio video a bassa latenza ULLS1 è andato perso e sarà recuperato nei prossimi 2/3 giorni
  • Il servizio di Hosting web HOST5 è andato perduto, compresi i backup che stavano nell'altro datacenter (nella parte andata distrutta).
    Fortunatamente i siti presenti erano oramai pochissimi.
    Gli altri servizi di hosting saranno probabilmente recuperati entro le prossime 2 settimane con, presumibilmente, tutti i dati.

SITUAZIONE MBCLOUD

Attualmente ci hanno comunicato che le seguenti istanze MBCloud non saranno recuperabili (compresi i dati):

  • MBCloud-122
  • MBCloud-123
  • MBCloud-124
  • MBCloud-209
  • MBCloud-220

Non è possibile recuperarli perchè le istanze principali erano su SBG2 e le copie di sicurezza sulla parte distrutta di SBG1.

Tutte le altre istanze MBCloud che attualmente non sono raggiungibili ci è stato detto che saranno recuperabili. Non abbiamo una data precisa riguardo alla riattivazione (speriamo la prossima settimana)

Riguardo alle istanze non recuperabili, i clienti dovranno farci sapere se preferiscono che li venga consegnato un MBCloud nuovo su altro datacenter oppure se desiderano rinunciare al servizio.

Siamo i primi ad essere consapevoli dei problemi e dei disagi che questo incendio ha causato a centinaia di nostri clienti.
Nonostante negli ultimi 10 anni la nostra azienda abbia investito moltissimo nella sicurezza dei dati, nessuno poteva immaginare un disastro di queste dimensioni che ha colpito e distrutto 2 dei datacenter più importanti e grandi d'Europa.

Molti in questi giorni ci hanno chiesto del perchè molti dei nostri servizi non siano attivati su piattaforme altamente ridondanti per scongiurare problematiche di questo genere.

  • Qualsiasi piattaforma informatica sarà comunque sempre vulnerabile da qualche parte. Disservizi causati da eventi straordinari come la distruzione di grandi datacenter e/o catastrofi naturali saranno sempre possibili.
  • La ridondanza dei dati su più datacenter in diverse parti del mondo è possibile ma il costo del servizio è stimato più del triplo.
    Questo non permetterebbe di essere concorrenziali con i prezzi del mercato. Si opta quindi per una ridondanza su macchine all'interno dello stesso datacenter, non immaginando certo che possa succedere la distruzione di 2 palazzi in una notte con centinaia di migliaia di server ineterconnessi.

A più tardi per ulteriori aggiornamenti.


 

 

LAVORI DEL GIORNO 13/03/2021 (sabato) (Risolto) Critico

Influenzando Altro - Riattivazione servizi

  • 13/03/2021 08:38 - 18/04/2021 23:21
  • Ultimo Aggiornamento 13/03/2021 20:23

Ore 8.30

Il lavoro di ricostruzione dei servizi continua notte e giorno.

Nella nottata abbiamo reso disponibile i servizi LIVE del server audio NR3.

In mattinata contiamo di ripristinare NR7 e NR4, mentre NR2 nel pomeriggio.

I server sono NUOVI.
Ricordiamo che i vecchi server NR2, NR3, NR4, NR7 e le relative copie di sicurezza sono al momento indisponibili e fino alla prossima settimana, quando OVH riavvierà il datacenter di Strasburgo, non sapremo se si riusciremo a recuperare server e dati.
Questo significa che stiamo ricostruendo i dati dei servizi uno per uno, basandoci sulle informazioni del nostro manager e delle aree clienti.
Al momento su questi server sarà impossibile riattivare i servizi EASY RADIO e i server che utilizzano gli autoDJ.
Se gli riattiviamo saranno al momento vuoti dei loro contenuti audio.

Su questi server audio, potrebbero non corrispondere le password di accesso ai pannelli e ai server di streaming se li avete cambiati senza passare dal manager (direttamente da CentovaCast).
Se notate un problema sul servizio aprite un ticket e richiedete il reset delle password.
Anche alcuni player relativi su PLAY5 devono essere ricostruiti. In giornata cercheremo di fare anche questo.

A più tardi per altri aggiornamenti.


Ore 13.50:

I nuovI server NR7 E NR2 SONO ONLINE ed i servizi sono stati ricreati.
Abbiamo fatto prima NR2 per questioni interne.
Anche in questo caso controllate le password ed eventuali mancanze

ATTENZIONE:
Su tutti i nuovi server (NR8,NR9,NR2,NR3,NR7 e più tardi NR4) sui servizi SHOUTCAST abbiamo attivato per HTTPS il proxy nuovo (in uso da circa 1 anno) che trovate come sempre nel pannello di controllo nella pagina 'Quick Links'.
Se utilizzavate il vecchio indirizzo HTTPS (prima di aprile 2020) sappiate che verranno ripristinati in serata di oggi.
O attendete oppure potete utilizzare momentaneamente il nuovo proxy (che in realtà dovrebbe essere utilizzato in priorità).
Per i clienti Icecast nessun problema.  Icecast ha HTTPS nativo.

Ricordiamo inoltre che i servizi con AUTODJ (EASY RADIO) non sono stati attivati e sarete contattati nelle prossime ore per accordi.

Ora procediamo con l'attivazione dei servizi su NR4


Ore 16.30:

Anche il server NR4 è stato ricostruito ed i servizi attivati.
Valgono le stesse osservazioni dette prima per gli altri server ricostruiti.


Ore 20.00:

Anche la macchina video WZ5 è stata ricostruita e in produzione.
Adesso procediamo con la ricostruzione di WZ6.


 

LAVORI DEL GIORNO 12/03/2021 (venerdì) (Risolto) Critico

Influenzando Altro - Riattivazione servizi

  • 12/03/2021 18:19 - 18/04/2021 23:21
  • Ultimo Aggiornamento 12/03/2021 18:32

Alle ore 15.00 di oggi abbiamo riattivato quasi tutti i servizi LIVE VIDEO su WZ2 e WZ3.

Non è stato possibile ancora attivare le istanze video con EASY TV.
Verrano riattivate nelle prossime ore. Purtroppo saranno consegnate VUOTE perchè non è possibile al momento il recupero di eventuali dati presenti nell'edificio interessato dall'incendio.

Poichè i dati di login e password dei servizi video sono stati recuperati dalle vostre aree clienti, si prega di verificare:

  • Che l'accesso al pannello con le credenziali in vostro possesso sia possibile.
    In caso contrario potete accedere al pannello tramite la vostra area clienti ed eventualmente cambiare la password (o verificarla) dall'area clienti stessa.
    Verificate anche la password utilizzata per lo streaming (che se non era da voi stata cambiata coincide con quella del pannello di controllo)
    Se non avevate cambiato la pasword iniziale dovrebbe funzionare tutto correttamente.
  • Verificate che siano state attivate le opzioni aggiuntive del vostro servizio (come ad esempio gli Stream Target di Facebook, se acquistato il servizio)
    Nel caso non fosse attivato richiedetelo tramite ticket
  • Verificate che il bitrate impostato sia quello accordato in fase di acquisto.
    Noi abbiamo impostato il valore di default del piano. Se avevate concordato un bitrate differente fatecelo sapere

Stiamo procedendo all'attivazione dei server Audio rimanenti.
Ci sono forti rallentamenti e ostacoli dovuti alle installazioni bloccate da disservizi esterni sempre causati dall'incendio di strasburgo.
Non abbiamo una stima del tempo necessario.


 

LAVORI DEL GIORNO 11/03/2021 (Risolto) Critico

Influenzando Altro - Riattivazione servizi

  • 12/03/2021 02:06 - 18/04/2021 23:21
  • Ultimo Aggiornamento 12/03/2021 02:22

Nella giornata di giovedì 11/02/2021:

  • Siamo riusciti a riattivare il server audio NR8 (con numerose difficoltà)
  • Abbiamo ricreato i server video WZ2, WZ3, WZ5
    Nella giornata di venerdì 12 riattiveremo progressivamente tutti i servizi video LIVE.
    Purtroppo non sarà possibile ristabilire i files video che erano presenti su tutti gli EASY TV (AutoDJ Video) e le relative programmazioni schedulate.
    Solo la prossima settimana, con la riattivazione parziale dei datacenter di Strasburgo, sapremo se i dati dei contenuti video saranno disponibili o persi.
  • Sempre nella giornata di venerdì inizieremo la riattivazione dei server audio NR2, NR3, NR4, NR7
    Questa operazione sarà la più difficile perche non disponiamo al momento di dati e sarà necessario riaprire MANUALMENTE ogni singolo account.
  • Abbiamo creato le macchine di hosting.
    Entro venerdì 12 distribuiremo ai clienti le credenziali per l'accesso.
    Anche in questo caso non sono disponibili backup di dati fino alla prossima settimana (sempre che siano disponibili nelle aree del datacenter non colpite dall'incendio).
  • Stiamo lavorando continuamente per la riattivazione e/o correzione dei dati sui player PLAY5 di alcuni clienti.
    Il database che siamo riusciti a salvare è purtroppo vecchio di qualche mese ed è necessario recupare configurazioni recenti che stiamo facendo completamente in modo manuale.
  • Lo stesso discorso per le APP. Stiamo di ora in ora ristabilendo il database delle informazioni delle APP ed esse sono tornate quasi tutte in funzione (circa il 75%)
  • Nella giornata di sabato prevediamo di fare il punto della situazione sulle istanze MBCloud.

Continuate a seguire le informazioni su questo task.

Per le informazioni sul datacenter di Strasburgo potete sempre seguire le informazioni da questo link:

http://travaux.ovh.net/?do=details&id=49484&


 

RIATTIVAZIONE SERVIZI PROVVISORI (Risolto) Critico

Influenzando Altro - Generale

  • 10/03/2021 13:30 - 18/04/2021 23:20
  • Ultimo Aggiornamento 11/03/2021 01:53

Apriamo questo post per elencare i servizi che man mano riusciamo a riaprire provvisoriamente:


Abbiamo ripristinato il server che fornisce le informazioni alle APP.
Nel più breve tempo possibile le APP (streaming fermi a parte) dovrebbero ripartire.


Abbiamo difficoltà a creare e spostare i servizi su altri datacenter o risorse. Il sistema di controllo dei servizi OVH è parzialmente fuori uso e non ci permette di fare, in questo momento, operazioni di migrazione.

Contiamo di ripristinare in giornata:

  • NR8 e NR9  (streaming audio)
  • PLAY5  (Sistema player HTML5)
  • Alcuni siti in modalità provvisoria

Una versione provvisoria di PLAY5 è in produzione.  I player HTML5 sono nuovamente disponibili.


Ore 21.41:  Il server di streaming audio NR9 è online e funzionante.  Seguono controlli e verifiche.

Procediamo ora con il ripristino di NR8


Ore 1.00 del 11/03/2021. Situazione.

Attualmente stiamo riscontrando un problema di indisponibilità di risorse e di difficoltà di gestione dei domini.
In pratica i migliaia di clienti come noi che sono vittime del grave incendio del datacenter di Strasburgo, stanno tutti acquistando e spostando servizi su altri datacenter in tutta Europa.

I tempi di consegna del materiale è diventato lunghissimo a causa della scarsità delle risorse per affrontare una mole di migrazioni così imponente. Abbiamo decine di server in coda di attivazione per sostituire quelli distrutti dall'incendio.
Attivazioni che normalmente fanno attendere anche solo pochi minuti, stanno impiegando ore ed ore. Inoltre anche le infrastrutture di controllo della rete, degli IP e dei domini sono fortemente rallentate e risulta difficile e lentissimo fare anche le cose più semplici che impiegano normalmente pochi secondi.

In serata il CEO di OVH, Octave Klaba, ha reso noto la situazione e le tempistiche attualemente previste per la risoluzione parziale dei problemi:

  • Il datacenter di Strasburgo conta 7 edifici. SBG2 è quello che è andato completamente distrutto. SBG1 è recuperabile al 70%, SBG3 e SBG4 non sono stati danneggiati lato server ma l'infrastruttura elettrica (danneggiata nell'incendio) non ne permette la riaccensione in tempi immediati.
  • Si prevede un ripristino dei datacenter SBG1 e SBG4 entro la giornata di lunedì 15 marzo e il ripristino di SBG4 entro venerdì 19 marzo.
  • Non è ancora chiaro quali siano i danni relativi alla perdita di dati sulla struttura di SBG2 e SBG1 (parziale). Si potranno avere informazioni maggiori solo nelle prossime ore/giorni.

Attualmente la nostra azienda sta lavorando giorno e notte per ripristinare tutti i servizi fermi nei tempi più brevi possibili. Tenete comunque conto che i miracoli non sono possibili. Si parla di migliaia di server distrutti ed in alcuni casi la ridondanza di dati potrebbe essere compromessa dal fatto che eventuali backup potrebbero essere stati ospitati nello stesso datacenter o quallo a fianco.

Stiamo procedendo in questa modalità:

  • Entro domani crediamo di essere in grado di ripristinare il server di streaming audio NR8 e parte dei servizi su NR2, NR3, NR4, NR7
    Mentre sui server NR8 e NR9 siamo riusciti a ripristinarli completamente grazie ad un backup su altro datacenter, per quanto riguarda NR2, NR3, NR4, NR7 saremo in grado di ripristinare al momento esclusivamente solo i servizi di streaming LIVE. Non sarà possibile ripristinare gli eventuali contenuti degli AutoDJ (Easy Radio). la prossima settimana, se i dati saranno disponibili, verranno integrati dove necessario.
    Tenete presente che, come descritto nelle nostre condizioni di servizio, noi non potremmo fare duplicazione dei dati di contenuti musicali protetti. Nella regolarità, in caso di cancellazione accidentale da parte dell'utente o a causa di gravi incidenti, non saremmo autorizzati a mettere a disposizione delle copie di contenuti editi.
  • Sempre entro domani cercheremo di risolvere tutti gli eventuali problemi sul server di distribuzione dei dati per le APP e il nostro player PLAY5, già tornati a funzionare ma con alcuni aggiustamenti da terminare in alcuni rari casi.
  • Entro la giornata di sabato dovremmo essere in grado di ripristinare i servizi video sui server WZ2, WZ3, WZ5, WZ6.
    Anche in questo caso non ci saranno problemi nel recupero degli streaming LIVE ma sarà difficile recuperare da subito i contenuti video caricati sui server.
    Stesso discorso vale anche per le statistiche che saranno recuperabili (speriamo) solo la prossima settimana.
  • Per quanto riguarda i server MBCloud attualmente fermi, la loro riattivazione avverrà nell'arco di circa 10 giorni e senza la certezza di ripristinare i contenuti musicali caricati.

I server NR1, NR11, NR5, NR6, NRF1 e numerosi MB Cloud non si trovano a Strasburgo e quindi non hanno avuto nessun tipo di fermo.

Su questa pagina cercheremo di tenervi informati costantemente sull'andamento dei lavori. Vi preghiamo gentilmente di avere un po' di comprensione. Si tratta di una delle 'catastrofi' informatiche più grosse degli utlimi anni con un impatto di dimensioni enormi. Migliaia di siti e servizi fermi in tutta Europa. anche siti governativi e di importanza strategica.
Vi chiediamo gentilmente di non intasare il nostro centralino e di aprire un ticket esclusivamente in caso di reale necessità.
Le informazioni che possiamo dare sono esattamente quelle che scriviamo in questa pagina. Siamo i primi ad essere consapevoli dei problemi che molti di voi stanno avendo e tutti noi stiamo lavorando per risolverli.

Al termine di questa brutta avventura troveremo il modo di valorizzare i disservizi secondo le nostre regole di SLA che potete trovare sulla pagina dedicata del nostro sito:
https://www.newradio.it/sla-service-level-agreement/


 

DATACENTER DI STRASBURGO FERMO CAUSA GRAVE INCENDIO (Risolto) Critico

Influenzando Altro - STRUTTURA GENERALE

  • 10/03/2021 06:18 - 18/04/2021 23:20
  • Ultimo Aggiornamento 10/03/2021 10:30

Alle ore 00.46 di questa notte (10/03/2021) un imponente incendio ha colpito 4 aree del datacenter di Strasburgo di OVH.

Il datacenter di Strasburgo è uno dei più grandi datacenter europei e il più vicino all' Italia dell'infrastruttura OVH.

Oltre il 50% della nostra infrastruttura server è ospitata in questo datacenter e quindi, al momento, un grande numero di servizi di streaming, hosting e MBCloud risultano fermi ed irraggiungibili.

Al momento in cui scriviamo questo comunicato (le ore 6.36 in Italia) la situazione è ancora grave e i vigili del fuoco francesi non sono ancora riusciti a dominare l'incendio.

Data la situazione, non siamo ancora in grado di capire tempi di ripristino e anche la possibilità di recuperare tutti i dati di alcuni servizi.

Dobbiamo attendere che l'incendio sia domato e che OVH ci fornisca informazioni dettagliate sulla situazione.

Attualmente stiamo attivando il nostro piano di DISASTER RECOVERY e vedere (dove possibile) di ripristinare i servizi appena possibile.

Vi chiediamo gentilmente , vista la gravità e la straordinarietà dell'evento, di collaborare con noi mantenendo la calma.

Siamo consapevoli del fatto che molti servizi sono fermi e noi siamo nella totale impossibilità di ripristinarli in tempi brevi.

Tutta la struttura di OVH in Francia (centinaia di persone) e tutto il nostro personale è già attivato per cercare di risolvere i problemi.

Per cortesia, pur capendo i problemi di ogni singolo cliente, non chiamateci e non scriveteci per segnalare il problema. Al momento non abbiamo possibilità di rispondere con nessuna informazione prevedibile.

Vi terremo aggiornati qui ma nmano che le informazioni dalla Francia arriveranno e delle nostre azioni intraprese per la rimessa in funzione dei servizi.

Solo con la vostra collaborazione potremo accellerare la ripresa graduale dei servizi in essere.


Questo è il link diretto al problema sul sito di assistenza OVH:

http://travaux.ovh.net/?do=details&id=49484&


Questa la situazione provvisoria alle 8.25:
Il datacenter interessato dall'incendio sembra essere solo SBG2. I vigili del fuoco ancora non hanno domato l'incendio. SBG2 è stato isolato ma anche SBG1, SBG3 e SBG4 sono fermi (senza corrente) per questioni di sicurezza.

Al momento non abbiamo informazioni inerenti i nostri server coinvolti nell'incendio e delle copie di sicurezza dei dati che sono, in alcuni casi, nei datacenter adiacenti.

Purtroppo fino a quando OVH non farà un punto della situazione, non sarà possibile capire come intervenire nel ripristino dei servizi.

Occorre un po' di pazienza. Ricordiamo che stiamo parlando di decine di migliaia di server coinvolti, con migliaia di imprese colpite in tutta Europa.


https://www.hosting-advisor.it/ovh-down-problemi-server-datacenter/

https://www.newslinet.com/media-incendio-a-data-center-ovh-di-strasburgo-4-aree-interessate-centinaia-di-siti-e-flussi-streaming-down-possibile-perdita-di-dati/


Situazione alle 10.20:

Mentre i tecnici di OVH cercano di far ripartire almeno SBG1, SBG3 e SBG4 (non danneggiati dall'incendio), al momento il gestionale MANAGER di OVH (il pannello di controllo dove gestiamo tutti i nostri servizi) è attualmente non funzionante.

Questo significa che oltre al problema sul datacenter di strasburgo, siamo impossibilitati a fare qualsiasi altra operazione al momento anche su altri datacenter. E' tutto bloccato e/o paralizzato.

Vi preghiamo gentilmente di non chiamare e non aprire tickets chiedendo di risolvere problemi in modi differenti. E' tutto bloccato e nessuna operazione è possibile in generale.

Tutto quello che sarà possibile fare lo faremo direttamente noi per rimettere in marcia i servizi parzialmente o totalmente. Ogni telefonata o mail che fate sottrae tempo alla risoluzione dei problemi. Grazie.


 

DISSERVIZIO GENERALE DI RETE (Risolto) Critico

Influenzando Altro - Server NR2,NR3,NR4 NR7,NR8,NR9,WZ2,WZ3,WZ5 e numerosi MBCloud

  • 10/03/2021 00:39 - 10/03/2021 06:54
  • Ultimo Aggiornamento 10/03/2021 03:00

Da qualche minuto riscontriamo problemi a raggiungere numerosi server dei nostri servizi da rete nazionale ed internazionale.

I tecnici stanno verificando i problemi


Il problema è attualmente circoscritto ai server NR2, NR3, NR7, WZ5 e alcuni server di hosting


Il guasto è grave. Ci sono almeno 15 server che sono interessati al fermo.

I tecnici sono al lavoro per la risoluzione.

http://travaux.ovh.net/?do=details&id=49471


Il guasto sta impattando anche numerose istanze di MBCloud


 

MBCloud-221 irraggiungibile (RISOLTO) (Risolto) Critico

Influenzando Altro - MBCloud-221

  • 02/03/2021 21:57 - 10/03/2021 00:38
  • Ultimo Aggiornamento 02/03/2021 23:28

Il server MBCloud-221 è attualmente irraggiungibile.

I tecnici sono al lavoro per il ripristino.


Il problema è stato risolto ed il servizio è tornato disponibile e online.


 

Disservizio su server WZ2 (RISOLTO) (Risolto) Critico

Influenzando Server - WZ2

  • 02/03/2021 18:07 - 10/03/2021 00:38
  • Ultimo Aggiornamento 02/03/2021 18:09

E stato riscontrato un problema sul server in oggetto.

Il problema è stato corretto.

Tutti i servizi sono tornati online regolarmente.


 

Problemi su Icecast2 (RISOLTO) (Risolto) Critico

Influenzando Server - NRF 1

  • 23/11/2020 18:42 - 06/01/2021 17:50
  • Ultimo Aggiornamento 24/11/2020 01:39

A seguito di un aggiornamento del pannello NRF1 sembra che i server Icecast2 non stiano funzionando.

I programmatori del pannello stanno già lavorando per una soluzione imminente.

Nessun problema per i servizi in Shoutcast2 e Icecast KH


Aggiornamento:

Il bug causato dall'aggiornamento è stato risolto. Tutti i server Icecast2 sono nuovamente disponibili su NRF1


 

Problemi su collegamento internazionale (RISOLTO) (Risolto) Critico

Influenzando Altro - Tutti i servizi

  • 19/11/2020 00:21 - 23/11/2020 18:42
  • Ultimo Aggiornamento 19/11/2020 02:04

Ci segnalano che da circa 10 minuti molti dei servizi risultano non raggiungibili o rallentati.

Da un primo controllo si direbbe un problema di rete internazionale.


Il problema è sulla rete di un datacenter francese.

http://travaux.ovh.net/?do=details&id=47755&

http://travaux.ovh.net/?do=details&id=47760&


Il problema di rete è rientrato. Tutti i servizi sono tornati raggiungibili.


 

Statistiche storiche non funzionanti (RISOLTO) (Risolto) Medio

Influenzando Altro - Servizi Video

  • 17/11/2020 18:53 - 06/01/2021 17:50
  • Ultimo Aggiornamento 19/11/2020 02:04

Dalla giornata di sabato 14/11/2020 su tutti i pannelli MediaCP dei server video riscontriamo un problema sulla lettura delle statistiche storiche.

Il programmatore del pannello sta indagando sul problema per la risoluzione

I server impattati sono: WZ2, WZ3, WZ6, WZ7


In data 18/11 il bug del software è stato corretto.

Le statistiche sui server video funzionano nuovamente in modo corretto.


 

RISOLTO COMPLETAMENTE PROBLEMA IP BLOCCATI (Risolto) Critico

Influenzando Altro - IP Bloccati in Italia

  • 11/11/2020 11:23 - 06/01/2021 17:50
  • Ultimo Aggiornamento 17/11/2020 00:18

Nella tarda serata del 10/11/2020 la magistratura di Napoli ha ordinato il dissequestro di tutti gli IP bloccati 'per errore' nel corso dell'operazione della Guardia di Finanza incominciata venerdì 6/11.

In queste ore gli IP bloccati stanno pian piano tornando disponibili per tutti i gestori italiani.

Non appena tutti gli operatori avranno tolti ogni blocco, in maniere completamente indolore e senza interruzioni, riporteremo in produzione gli IP originali e tutto tornerà a funzionare come prima anche per coloro che lavorano solo con gli IP e non con l'hostname.

Non sarà necessario nessun intervento da parte dei nostri clienti e non saranno necessarie nuove interruzioni nella migrazione.


Aggiornamento del 15/11/2020

Nonostante il dissequestro del 10/11/2020 da parte della magistratura di Napoli di tutti gli IP erroneamente bloccati, l'operatore Wind3 è l'unico che non ha ancora eseguito lo sblocco degli IP sulla loro rete.

Tutti gli operatori Italiani già nella giornata del 11/11/2020 avevano completamente sbloccato tutti gli IP in questione.

Windtre no. Per questo motivo ancora siamo impossibilitati a ristabilire il funzionamento dei nostri servizi con gli IP originali.

Naturalmente la soluzione adottata dalla nostra azienda domenica scorsa 8/11 sta funzionando egregiamente e tutti i servizi sono regolarmente funzionanti.

Rimane comunque assurdo che un operatore italiano, visto i danni che questa situazione sta causando a centinaia di aziende, continui a non eseguire lo sblocco, probabilmente ed esclusivamente per una loro lentezza nell'eseguire delle configurazioni di rete.

Confidiamo che l'operatore sblocchi al più presto possibile gli IP per permetterci di ripristinare le nostre configurazioni in modo regolare.


Aggiornamento del 16/11/2020

Alle ore 18 circa di oggi 16/11, anche l'operatore Windtre ha finalmente sbloccato tutti gli IP sulla rete italiana con un ritardo di ben6 giorni rispetto agli altri operatori.

Entro la giornata di domani tutti gli IP saranno nuovamente operativi ed anche eventuali configurazioni non aggiornate negli ultimi giorni da parte dei nostri clienti riprenderanno a funzionare come sempre.

Non è necessario fare nulla da parte del cliente. Tutto ritornerà esattamente come prima senza nessun disservizio ed in modo trasparente.


 

DISSERVIZIO RETE FASTWEB + TIM + WIND (risolto) (Risolto) Critico

Influenzando Altro - NR2,NR3,NR4,NR5,NR6,NR7,NR8,NR9

  • 06/11/2020 23:13 - 06/01/2021 17:50
  • Ultimo Aggiornamento 17/11/2020 00:17

Dal tardo pomeriggio di oggi (6/11/2020) ci segnalano che la maggior parte dei server e dei servizi locati in Europa sono irraggiungibili da rete Fastweb dall'Italia.

Abbiamo già segnalato il problema ma chiediamo anche ad eventuali clienti colpiti da questa problematica di avviare anche loro una segnalazione al provider Fastweb.

La causa non è da attribuire alla nostra infrastruttura ma esclusivamente a Fastweb Italia.

Da tutti gli altri provider tutto funziona regolarmente.


Purtroppo alle ore 9.30 di oggi 7/11/2020 Fastweb ancora non ha risolto il problema di connessione internazionale.

Il loro supporto tecnico non risponde alle segnalazioni. Attendiamo la risoluzione del problema da parte loro.

Ricordiamo che solo la rete fastweb ha questi problemi verso alcune infrastrutture europee. Fastweb ed eventuali operatori a loro collegati.


Il disservizio continua ma non su tutti i server.  Fastweb sta bloccando solo alcuni IP ed altri no. Probabilmente hanno un problema a livello del loro firewall di rete.

Non abbiamo previsioni sui tempi del ripristino. Dipende dai tecnici di rete di Fastweb che devono intervenire sui loro firewall.


Ci segnalano alcuni problemi anche lato Tim. Si presume quindi un problema generale sul mix di Milano verso la dorsale europea. Questo conferma la problematica verso alcune connessioni europee da parte della rete italiana di Fastweb e Tim.


Ancora nessuna risposta da parte di Fastweb e TIM sul loroo disservizio in corso.


Aggiornamento delle ore 23.20 del 7/11/2020:

Purtroppo ancora nessuna notizia certa su quello che stia succedendo. Mentre da fuori dall' Italia e da tutti gli altri provider tutti i server sono perfettamente raggiungibili, da Fastweb, TIM e WIND persiste ancora questo misterioso blocco sui server: NR2, NR3, NR4, NR5, NR6, NR7, NR8 e NR9 della nostra infrastruttura e di numerosi nostri competitor.

I provider interessati al blocco continuano a non rispondere alle decine di segnalazioni che abbiamo inoltrato loro tramite canali ufficiali ed dedicati.

Nelle ultime ore è saltata fuori anche una notizia (la trovate su quasi tutte le testate) che la Guardia Di Finanza avrebbe iniziato proprio ieri una grossa operazione di oscuramento di siti dedicato alla ritrasmissione pirata di eventi sportivi in video. Questa operazione potrebbe aver portato alla disattivazione di centinaia di indirizzi IP ritenuti far parte di questa organizzazione pirata.

Si presume che il blocco di questi IP, avvenuto in modo sommario per 'classi' di IP e non per IP singoli, abbia messo in mezzo anche centinaia di servizi che non centrano nulla con queste piattaforme bloccate.

Purtroppo però non esistono assolutamente conferme di questa ipotesi, rimaniamo del parere e nella speranza che si tratti esclusivamente di una problematica tecnica legata ad una perdita di configurazione o di un blocco di uno dei router del mix di Milano dove avvengono le connessioni con le dorsali internazionali verso il nord Europa.

Fino a che non ci verrà data una risposta chiara su quello che realmente sta succedendo, non abbiamo la possibilità di pianificare nessun tipo di soluzione per risolvere la problematica. Cambiare IP o nodi di rete potrebbe non risolvere nulla se il blocco persiste su classi definite di indirizzi.

Dobbiamo attendere che Fastweb, TIM e WIND rispondano su quello che sta accadendo dato che il blocco è causato dalla loro infrastruttura e non dalla nostra.

Chiediamo a tutti i nostri clienti interessati da questo grave disguidi di pazientare ancora qualche ora nella speranza che qualcuno risponda in modo concreto su quello che realmente sta accadendo.

Vi terremo informati qui su tutta la situazione.


Aggiornamento delle ore 13.35 del 8/11/2020

L'ipotesi del blocco degli IP da parte della Guardia di Finanza a causa del blitz di sequestri su alcuni siti pirata sembra sempre più credibile.  Il fatto che nel mucchio siano finiti anche centinaia di IP non coinvolti in questa situazione è molto grave e verrà discussa nei prossimi giorni con chi ha sbagliato nel generare i blocchi.

Attualmente abbiamo temporaneamente tamponato il problema cambiando gli indirizzi IP dei server compromessi dal blocco di Fastweb, TIM e Wind.

I server NR2, NR3, NR4, NR5, NR6, NR7, NR8, NR9 stanno tornando raggiungibili e lo saranno completamente nelle prossime ore (il tempo che i DNS si propaghino).

Poichè in questa fase temporanea gli IP sono cambiati, è necessario da parte vostra un minimo di attenzione su alcune cose:

Se sui vostri encoder di streaming avete messo l'indirizzo IP numerico (del tipo  123.456.789.123:xxxx, dove xxxx è il numero di porta) probabilmente da rete Fastweb, TIM e Wind non riuscirete a collegarvi al server.
Se sui vostri encoder di streaming avete messo l'indirizzo con Hostname (del tipo  nrX.newradio.it:xxxx, dove xxxx è il numero di porta e X il numero del server) non avrete problemi a collegarvi.

Nel caso abbiate l'indirizzo IP numerico dovete sostituirlo con il nome del server (come del resto è stato sempre da noi consigliato).

Per quanto riguarda invece i player:

Se state utilizzando il nostro player PLAY5 o altri player di nostra produzione non dovete fare nulla.  Funzioneranno correttamente.

Se invece state utilizzando un PLAYER di terze parti, non gestito dalla nostra società, nel caso non dovesse funzionare verificate nel codice del player di star utilizzando l'indirizzo del server e non l'indirizzo IP numerico.

Se avete qualsiasi dubbio o difficoltà non esitate a contattarci tramite ticket postando la vostra configurazione. Vi diremo se è corretta e come cambiarla se necessario.

Esempio:

Se vi ritrovate su un MBStudio un indirizzo del tipo:  XXX.XX.139.184:1234/stream    dovrete cambiarlo in:  nr3.newradio.it:1234/stream
oppure
Se vi ritrovate su un MBStudio un indirizzo del tipo:  XXX.XX.139.184:1234,1    dovrete cambiarlo in:  nr3.newradio.it:1234,1

 

Quando nelle prossime ore o giorni verrà sbloccata la situazione e gli IP originali torneranno disponibili, tutto verrà ripristinato come sempre senza dover creare nessun tipo di disservizio.

Restiamo a disposizione per qualsiasi necessità e chiarimento.


Aggiornamento del 11/11/2020:

Nella tarda serata del 10/11/2020 la magistratura di Napoli ha ordinato il dissequestro di tutti gli IP bloccati 'per errore' nel corso dell'operazione della Guardia di Finanza incominciata venerdì 6/11.

In queste ore gli IP bloccati stanno pian piano tornando disponibili per tutti i gestori italiani.

Non appena tutti gli operatori avranno tolti ogni blocco, in maniere completamente indolore e senza interruzioni, riporteremo in produzione gli IP originali e tutto tornerà a funzionare come prima anche per coloro che lavorano solo con gli IP e non con l'hostname.

Non sarà necessario nessun intervento da parte dei nostri clienti e non saranno necessarie nuove interruzioni nella migrazione.


 

PROBLEMI DI RETE A LIVELLO NAZIONALE (Risolto) Critico

Influenzando Altro - RETE INTERNET ITALIANA

  • 20/10/2020 13:06 - 02/11/2020 00:47
  • Ultimo Aggiornamento 21/10/2020 10:34

Ci segnalano che in data odierna è in corso un grave disservizio nazionale su tutta la rete internet italiana.

Questo potrebbe causare rallentamenti o interruzioni sui servizi in ogni parte del paese.

Ci informano che gli operatori di rete stanno da questa mattina lavorando a livello nazionale per riprestinare lo stato della rete alla normalità.


In data 21/10/2020 la situazione sembra normalizzata al 90%

Riscontriamo ancora alcuni rallentamenti in qualche zona italiana ma decisamente contenuto rispetto alla giornata di ieri.

Telecom Sparkle notifica che in giornata la rete dovrebbe tornare al massimo della disponibilità.


 

MBCloud 123 - 124 irraggiungibili (RISOLTO) (Risolto) Critico

Influenzando Altro - Servers MBCloud

  • 19/10/2020 09:13 - 20/10/2020 13:06
  • Ultimo Aggiornamento 19/10/2020 10:56

Gli MBCloud 123 e 124 sono attualmente irraggiungibili via rete.

I tecnici stanno indagando e risolvendo le cause.


I 2 cloud sono funzionanti ma c'è un problema di rete che impedisce di raggiungerli.

Sono ancora in corso le verifiche per soluzionare il problema.


I server sono tornati disponibili e normalmente operativi.


 

Host5 irraggiungibile (Risolto) Critico

Influenzando Server - Host5

  • 19/09/2020 12:24 - 24/09/2020 09:29
  • Ultimo Aggiornamento 19/09/2020 12:26

Il server di hosting HOST5 è attualmente irraggiungile.

E' un problema legato al backup automatico del serve che ha bloccato l'istanza cloud.

I tecnici sono al lavoro per il ripristino. Si prevede la soluzione entro 60 minuti

Manutenzione straordinaria MB-Cloud (Risolto) Critico

Influenzando Altro - Servers MBCloud

  • 21/07/2020 22:21 - 19/09/2020 11:53
  • Ultimo Aggiornamento 21/07/2020 22:22

E' in corso un aggiornamento di emergenza di tutti i server MBCloud a causa di una falla di sicurezza di windows che potrebbe danneggiare alcune installazioni.

L'aggiornamento, come sempre, durerà pochi minuti.


 

Manutenzione straordinaria programmata (terminata) (Risolto) Critico

Influenzando Altro - Server di Hosting web Cloud

  • 16/07/2020 07:26 - 21/07/2020 18:56
  • Ultimo Aggiornamento 17/07/2020 17:51

Come comunicato via email nei giorni scorsi ai clienti interessati,

è in corso un importante e critico aggiornamento di tutte le piattaforme di hosting da parte del nostro fornitore.

Purtroppo i tempi sono attualmente un po' più lunghi del previsto.

Ci scusiamo per il disagio e continuiamo a rimanere in attesa del ripristino dei servizi al termine degli aggiornamenti macchine.


Alle ore 11.30 del 16/07/2020 tutti i siti sono tornati regolarmente online tranne il server HOST11 che ancora non ha risolto il problema di migrazione in corso


La problematica tecnica è dovuta ad un problema di copia di dati nella farm di Rubaix sulla piattaforma cloud di 1 baia definita.


La manutenzione programmata è terminata su tutti i servizi.


 

Manutenzione programmata MB-Cloud (Risolto) Alto

Influenzando Altro - MBCloud-122

  • 12/07/2020 03:57 - 12/07/2020 06:53
  • Ultimo Aggiornamento 12/07/2020 06:52

E' in corso una manutenzione straordinaria del server MBCloud-122

Il servizio sarà ripristinato nel più breve tempo possibile.


La manutenzione è terminata


 

Problemi su Sever WZ3 (risolto) (Risolto) Critico

Influenzando Server - WZ3

  • 04/07/2020 21:52 - 12/07/2020 03:57
  • Ultimo Aggiornamento 04/07/2020 22:59

Il server WZ3 è attualmente irrangiungibile.

E' in corso un intervento tecnico per il ripristino.

http://travaux.ovh.net/?do=details&id=45507&


Il problema è stato risolto.

Il server è regolarmente onòine e tutti i servizi disponibili.

 

Problemi su Sever NR3 - A1-IT (risolto parzialmente) (Risolto) Critico

Influenzando Altro - Server A1-it e NR3

  • 09/06/2020 15:09 - 04/07/2020 21:52
  • Ultimo Aggiornamento 09/06/2020 16:06

Il server in oggetto risultano al momento non raggiungibili.

I tecnici sono al lavoro per indagare sul problema.


I tecnici hanno isolato il guasto e stanno procedendo alla risoluzione del problema tecnico.

http://travaux.ovh.net/?do=details&id=45016&


Il server NR3 è ripartito e tutti i servizi sono attivi.

Rimane ancora fermo il server A1-it


E' un problema elettrico.

http://travaux.ovh.net/?do=details&id=45015


 

DISSERVIZI DI RETE GENERALE (Risolto) Critico

Influenzando Altro - Rete Internazionale

  • 30/03/2020 18:05 - 09/06/2020 15:09
  • Ultimo Aggiornamento 30/03/2020 18:12

Da circa 50 minuti la rete internazionale europea è interessata da alcuni problemi di connettività (purtroppo molto frequenti in questi giorni di quarantena a causa di un sovraffollamente della rete europea).

Tutti i nostri servizi sono operativi ma in alcuni momenti risultano irraggiungibili a livello di rete.

I tecnici delle nostre webfarm sono al lavoro per risolvere i problemi e gli operatori di rete altrettanto.

Al momento in cui scriviamo (18.05 ora italiana) la situazione sembra si stia normalizzando. Continuiamo a tenere sotto controllo la situazione.


http://travaux.ovh.net/?do=details&id=43793&


 

Server CC-A1-BR non raggiungibile / RISOLTO (Risolto) Critico

Influenzando Altro - Server CC-A1-BR

  • 07/03/2020 14:04 - 30/03/2020 17:35
  • Ultimo Aggiornamento 07/03/2020 14:44

E' in corso un problema sul server CC-A1-BR di Antena1 Brasile.

I tecnici sono al lavoro per la risoluzione del problema.


Il server è stato ripristinato. Tutti i servizi sono regolarmente operativi


 

NR2 non raggiungibile (Risolto) Critico

Influenzando Server - nr2

  • 26/02/2020 01:01 - 27/02/2020 18:18
  • Ultimo Aggiornamento 27/02/2020 18:18

Il server NR2 non è attualmente raggiungibile.

I tecnici stanno intervenendo per sanare il problema.


In attesa del ripristino del server da parte dei tecnici, abbiamo attivato un server di emergenza di NR2.


Il problema è stato risolto e il server principale è tornato in produzione.


 

Server NR6 con rallentamenti di rete (Risolto) Critico

Influenzando Server - nr6

  • 29/01/2020 11:05 - 29/01/2020 19:31
  • Ultimo Aggiornamento 29/01/2020 13:15

Il server NR6 sta subendo un rallentamento di rete insolito.

I tecnici stanno verificando se il problema dipende da un problema di rete internazionale o se causato da un attacco DDS al server.


Da un controllo effettuato il server NR6 è sotto attacco hacker da diversi minuti.  Il sistema anti DDos interviene e per filtrare l'attacco rallenta anche la connessione di rete.

Attualmente sembra che l'attacco sia concluso ma non possiamo prevedere che non si ripeta nei prossimi minuti.

Teniamo comunque sotto monitor la situazione.

Ricordiamo che gli attacchi DDos sono spesso totalmente casuali e colpiscono i server per riuscire a penetrarli ed utilizzarli per scopi illeciti.

Il sistema di filtro AntiDDos che i nostri server dispongono riescono ad impedire che l'attacco faccia danni ma, in caso di attacco molto forte, può influire sulle prestazioni del server stesso.


Alle 11.58 abbiamo effettuato un riavvio totale del server per pulire il sistema da eventuali problematiche portate dall'attacco.

Al momento tutti i servizi sembrano essere tornati alla normalità.  Continuiamo a monitorare costantemente la situazione.


 

Server WZ2 non funziona (risolto) (Risolto) Critico

Influenzando Server - WZ2

  • 19/01/2020 17:17 - 21/01/2020 13:43
  • Ultimo Aggiornamento 19/01/2020 17:35

A seguito di un aggiornamento del pannello Media CP, il server WZ2 non è ripartito correttamente.

I tecnici stanno indagando sul problema


Il servizio è stato regolarmente ripristinato.


 

SERVER NR8 IRRAGGIUNGIBILE (Risolto) Critico

Influenzando Server - nr8

  • 13/01/2020 15:20 - 19/01/2020 17:17
  • Ultimo Aggiornamento 13/01/2020 15:29

E' in corso un disservizio sul server NR8,

i tecnici sono al lavoro per il ripristino.

Prossime informazioni su questo ticket.


I tecnici dovrebbero aver risolto la problematica in tempi brevissimi.

Il server è nuovamente in linea.

Il downtime di servizio è stato di circa 2 minuti.

Rimaniamo operativi per un controllo sui prossimi minuti.

Rinnovo certificati SSL (Streaming in HTTPS) (Risolto) Alto

Influenzando Altro - Tutti i servizi streaming in https

  • 26/11/2019 11:02 - 23/12/2019 01:11
  • Ultimo Aggiornamento 26/11/2019 11:07

In questi giorni è in corso il rinnovo dei certificati SSL legati allo streaming in HTTPS.

Gli aggiornamenti prevedono un riavvio dei server Icecast che verrà fatto durante la notte.

Se doveste accorgervi che improvvisamente il flusso di streaming in https non devesse più funzionare (su server Icecast), vuol dire che il riavvio del server non è andato a buon fine in modo automatico.

In questo caso entrate sul vostro pannello di controllo CentovaCast e riavviate il servizio ( STOP e START, non fate RELOAD).

Oppure contattateci tramite un ticket e riproveremo noi a fare il riavvio.

 

Server NRF1 irraggiungibile - (risolto) (Risolto) Critico

Influenzando Server - NRF 1

  • 29/08/2019 12:54 - 26/11/2019 11:02
  • Ultimo Aggiornamento 29/08/2019 14:23

Il server NRF1 è al momento non raggiungibile.

Stiamo lavorando per il ripristino


I servizi shoutcast ed Icecast sono attivi.  Solo il pannello di controllo non è disponibile.


Il server è stato aggiornato ed è ritornato tutto on-line compreso il pannello di controllo.


 

Problemi su sito aziendale (Risolto) Alto

Influenzando Altro - Hosting newradio.it

  • 26/07/2019 11:56 - 07/08/2019 10:40
  • Ultimo Aggiornamento 26/07/2019 12:10

Nella giornata del 25/7/2019 a partire dalle ore 13 circa, il sito aziendale di newradio.it è stato per molte ore non disponibile.

Il sito è tornato online intorno alle ore 20.30 sempre del 25/7/2019 ed a oggi (26/7/2019) ancora risulta rallentato in molte operazioni.

Questo disservizio è stato causato da un grave incidente accaduto il 25/7 nel datacenter francese OVH di Graveline dove la sezione dove sono presenti i server del sistema cloud dell'hosting, ha avuto un problema sull'impianto di raffreddamento a causa dell'anomala ondata di caldo che ha interessato l'Europa ed in particolare il territorio francese a nord di Parigi.

Il sistema di raffreddamento ad acqua della struttura non è riuscito ad evitare il surriscaldamento delle macchine a causa di un piccolo guasto. Irrilevante in condizioni normali ma non in una situazione climatica fuori norma come quella di ieri.

L'assenza del sito aziendale ha comportato alcuni disservizi ai nostri clienti legati alla mancata possibilità di effettuare ordini, pagare fatture e scaricare programmi.

Inoltre alcune vecchie applicazioni Iphone ed Android sono ancora legate al sito aziendale per ricevere le informazioni sullo streaming da suonare e quindi sono  rimaste mute per alcune ore.

Fortunatamente nessun disservizio a minimamente impattato l'infrastruttura di streaming e di altri servizi, anche perchè presenti in datacenter differenti.

Ci scusiamo per il disagio arrecato e speriamo che questo non debba più ripetersi nei prossimi giorni.

Attualmente i tecnici stanno ancora lavorando per ripristinare le ultime parti che ancora stanno rallentando la visualizzazione delle pagine. Entro la giornata di oggi, 26/7/2019, tutto dovrebbe ritornare alla normalità anche riguardo alla velocità di risposta del sito in tutte le sue parti.

Cordiali saluti.

Server NR7 irraggiungibile (Risolto) (Risolto) Critico

Influenzando Server - nr7

  • 27/06/2019 17:12 - 06/07/2019 13:39
  • Ultimo Aggiornamento 28/06/2019 10:14

Il server NR7 è attualmente irraggiungibile.

I tecnici sono già al lavoro per la risoluzione del problema.

http://travaux.ovh.net/?do=details&id=39244&PHPSESSID=bbaa227dc76d8940040a8f7ca38e0e67


In attesa del ripristino del guasto da parte dei tecnici, stiamo approntando una istanza sostitutiva di emergenza.

Sarà operativa nel più breve tempo possibile.


Il server di emergenza è attivo e tutti i servizi di NR7 sono tornati disponibili.

Solo gli autoDJ potrebbero avere dei dati e delle programmazioni risalenti a 1 settimana fa.

Non appena il server principale tornerà operativo, tutti i servizi verranno riportati alla normalità


Alle ore 18.40 il server NR7 è stato riparato e rimesso in funzione. Per non procurare ulteriore disservizio, i servizi sono stati ripristinati dal backup al server di produzione solo nella notte.

L'incidente è chiuso

Problemi su server DNS TIM Business (Risolto) Medio

Influenzando Altro - Server DNS TIM (Servizio TIM SAFE WEB)

  • 10/06/2019 15:25 - 06/07/2019 13:38
  • Ultimo Aggiornamento 18/06/2019 12:08

Da lunedì 10 giugno alcuni clienti che hanno come operatore TIM Business (Impresa semplice) si possono ritrovare con il nostro dominio newradio.it non raggiungibile.

Il motivo di questo momentaneo blocco è dovuto al servizio TIM SAFE WEB che TIM abilita in automatico ad ogni utente TIM Business per un periodo gratuito di 3 mesi per poi diventare a pagamento se non disdetto dall'utente.

Non è chiaro ancora il motivo per cui TIM SAFE WEB blocchi il nostro dominio dal 10/6/2019. Abbiamo aperto una segnalazione verso TIM per ottenere una spiegazione e richiedere l'immediata rimozione del filtro sul nostro dominio erroneamente filtrato da questo sistema.

Indipendentemente dal fatto che nelle prossime ore il blocco verrà comunque rimosso, consigliamo tutti gli utenti TIM BUSINESS di richiedere la disabilitazione del servizio TIM SAFE BUSINESS perchè completamente inutile, potrebbe rallentare la vostra navigazione ed oltretutto (anche se da voi non richiesto) vi verrà prima o poi addebitato in bolletta come costo aggiuntivo.


Aggiornamento del 14/06/2019 ore 12.30:

Siamo in contatto con TIM Business e stanno lavorando per la risoluzione del problema.

Intanto, per tutti coloro che volessero risolvere velocemente la problematica posso operare in questo modo:

  • Richiedere al 191 la disattivazione del servizio TIM SAFE WEB (consigliato)
  • Cambiare gli indirizzi DNS del proprio PC con altri come ad esempio quelli di google: 8.8.8.8 (per utenti esperti)
    Pannello di controllo/centro connessioni di rete/modifica impostazioni scheda/scegliere la scheda di rete e fare proprietà con il tasto destro/selezionare 'protocollo internet versione 4/cliccare su proprietà/selezionare 'Utilizza i seguenti server DNS'/inserire 8.8.8.8/confermare il tutto.
  • Utilizzare momentaneamente un operatore diverso da TIM

In data 17/6/2019 alle ore 16.32, il servizio di assistenza TIM SAFE WEB ci comunica quanto segue:

Ti informiamo che il Supporto di competenza ci ha comunicato la risoluzione dello stesso con la seguente nota: 

ESITO POSITIVO
La navigazione verso il sito da te segnalato è stata ripristinata e autorizzata dal servizio TIM Safe Web.
Ringraziandoti per la collaborazione, ci scusiamo per il disagio arrecato.

Team di TIM Safe Web

Sollecitiamo tutti gli utenti TIM Business che hanno avuto problemi a raggiungere i nostri siti nelle ultime giornate di verificare se il problema è realmente rientrato e siti e servizi newradio.it sono tornati visibili.


A causa della propagazione dei DNS, potrebbero volerci 24 ore prima che il problema rientri completamente.

Server MBCloud-09 irraggiungibile (Risolto) Critico

Influenzando Altro - MBCloud-09

  • 30/05/2019 18:22 - 30/05/2019 19:20
  • Ultimo Aggiornamento 30/05/2019 19:20

Stiamoo riscontrando un problema sul server MBCloud-09

Il problema è relativo al seguente guasto in webfarm:

http://travaux.ovh.net/?do=details&id=38714&PHPSESSID=037c263ed45bb7e4bc85822da6331f72

In attesa di risoluzione del problema.


Il servizio è tornato disponibile normalmente.

Manutenzione server NR8 (effettuata) (Risolto) Medio

Influenzando Server - nr8

  • 30/03/2019 04:55 - 03/04/2019 15:18
  • Ultimo Aggiornamento 30/03/2019 04:56

Nella notte del 30/03/2019 abbiamo effettuato una manutenzione straordinaria del server NR 8

Il server è stato completamente rinnovato e potenziato.

Il tempo di downtime intorno alle ore 3.30 è stato di circa 2 secondi.


 

Manutenzione server NR5 - NR6 (effettuata) (Risolto) Medio

Influenzando Altro - Server NR5 e NR6

  • 29/03/2019 04:08 - 30/03/2019 04:54
  • Ultimo Aggiornamento 29/03/2019 04:10

Nella notte del 29/03/2019 abbiamo effettuato una manutenzione straordinaria dei server NR5  e  NR6

I server sono stati completamente rinnovati e potenziati.

Il tempo di downtime intorno alle ore 2.30 è stato di circa 2 secondi.

Manutenzione server NR1 - NR11 (effettuata) (Risolto) Medio

Influenzando Server - nr11

  • 28/03/2019 03:22 - 29/03/2019 04:08
  • Ultimo Aggiornamento 28/03/2019 03:25

Nella notte del 28/03/2019 abbiamo effettuato una manutenzione straordinaria del server NR1 / 11

Il server è stato completamente rinnovato e potenziato.

Il tempo di downtime intorno alle ore 2.30 è stato di circa 2 secondi.


 

Server NR1 irraggiungibile (Risolto) Alto

Influenzando Server - nr1

  • 26/03/2019 14:25 - 28/03/2019 03:22
  • Ultimo Aggiornamento 26/03/2019 16:22

Stiamo riscontrando problemi sul server NR1 che risulta irraggiungibile.

I tecnici stanno verificando.


Trovato il problema, i tecnici stanno risolvendo.


Un problema sul sistema di rete. Stiamo provvedendo ad avviare il server di emergenza


Purtroppo c'è un problema grave a livello webfarm che impedisce di intervenire sulle istanze in modo veloce. Stiamo lavorando per risolvere nel più breve tempo possibile.


Attualmente il problema di rete è rientrato.  Tutti i servizi sono nuovamente operativi

Server NR3 in emergenza (risolto) (Risolto) Critico

Influenzando Server - nr3

  • 22/03/2019 12:55 - 26/03/2019 14:25
  • Ultimo Aggiornamento 22/03/2019 15:04

Il server NR3 è da qualche minuto irraggiungibile.
Sono in corso accertamenti tecnici.


Attualmente abbiamo ripristinato un servizio di emergenza sul server NR 3.  Il 90% dei servizi è attualmente attivo.


Il server NR 3  è stato completamente ripristinato.
I servizi sono stati trasferiti dal server di emergenza a quello in produzione.
Tutti i servizi sono regolarmente operativi.

ATTENZIONE:
Abbiamo ripristinato il backup delle ore 4.30 del giorno 22/03/2019 (oggi)
Statistiche di oggi ed eventuali modifiche a EASY RADIO (autoDJ) effettuate oggi sono andate perdute.

Server NR8 Down (Risolto) Critico

Influenzando Server - nr8

  • 20/03/2019 16:51 - 22/03/2019 10:57
  • Ultimo Aggiornamento 21/03/2019 01:15

Il server risulta al momento irraggiungibile.

I tecnici sono al lavoro per ripristinare il servizio.


Un'intera ala della webfarm che ospita il sistema cloud di NR8 ed altri servizi è attualmente impattata da un grave problema di rete.

I tecnici sono al lavoro per la risoluzione del problema.

A causa della gravità del guasto non è possibile avviare l'istanza di emergenza per coprire il disservizio.

Bisogna attendere che venga risolto il problema.  Prossime informazioni su questo ticket


Questo il ticket di lavorazione della webfarm:

http://travaux.ovh.net/?do=details&id=37618


In attesa che il ripristino sia terminato, abbiamo attualmente acceso un server di emergenza. Quasi il 90% dei servizi di NR8 sono attualmente funzionanti.


Attualmente abbiamo completato il setup del sistema di emergenza.  Provvederemo a riportare il servizio sulla macchina principale in nottata, per non dare ulteriore disservizio.

Preghiamo tutti coloro che hanno un servizio EASY RADIO (server con AutoDJ) di non fare modifiche a playlist e files fino a domani.


Ore 01.00 del 21/03/2019

Il server NR8 è stato completamente ristabilito e rinnovato.
I servizi sono stati nuovamente migrati dal server di emergenza al definitivo.
Tutti i servizi sono regolarmente operativi.

ATTENZIONE:
Il ripristino è stato fatto dal backup di NR8 del 20/3/2019 alle 04.30 della notte.
Quindi i dati statistici ed eventuali modifiche effettuate nella giornata del 20/3/2019 sono andate perdute.

Manutenzione straordinaria server NR 9 (Risolto) Critico

Influenzando Server - nr9

  • 12/02/2019 03:49 - 25/02/2019 17:49
  • Ultimo Aggiornamento 14/02/2019 04:12

Nella notte tra il giorno 11/02/2019 e il 12/02/2019 alle ore 3.28 è stato effettuato un intervento di manutenzione straordinaria al server in oggetto per una verifica su alcuni problemi di rete riscontrati negli ultimi giorni.

Il server dopo 6 minuti è tornato completamente operativo. Nella giornata di oggi (12/02/2019) verrà tenuto sotto controllo per vedere se i problemi sono stati risolti.

Nel caso contrario, se riscontreremo ancora piccole disconnessioni di rete durante il corso della giornata, provvederemo a migrare il server su una nuova istanza nella prossima notte.


Alle ore 15.00 del 12/02/2019 non abbiamo ancora registrato nessun pacchetto di rete perso dal momento di manutenzione avvenute la scorsa notte.

Se entro 48 ore la situazione rimane stabile potremo considerare chiusa la problematica.


Alle ore 16 del 13/02/2019  abbiamo purtroppo rilevato ancora alcune perdite di pacchetti sulla rete della baia dove presente il server NR9.

Abbiamo quindi deciso di migrare la prossima notte il server NR9 su un altro host in un'altra posizione della baia.

La migrazione comporterà una interruzione del servizio di circa 1/2 minuti nella notte.


Alle ore 4 del 14/02/2019 la migrazione è stata completata con successo.  Il tempo di inattività dei servizi durante lo spostamento è stato di circa 1 secondo.

Nelle prossime 48 ore continueranno le verifiche per controllare che il problema di rete sia stato risolto completamente.


 

Sito aziendale sotto attacco - risolto (Risolto) Alto

Influenzando Altro - Hosting newradio.it

  • 29/01/2019 01:06 - 01/02/2019 16:34
  • Ultimo Aggiornamento 29/01/2019 01:13

Il giorno 28/1/2019 alle ore 22.45 il sito aziendale di newradio.it è stato messo sotto attacco hacker e danneggiato.

Il sito newradio.it, l'area clienti e il servizio di puntamento delle app Anfroid e Ios sono rimasti irraggiungibili per diversi minuti.
Nessun servizio di streaming è stato coinvolto in questo fermo e tutti i server di streaming sono stati regolarmente ONLINE compresi i player collegati a PLAY5.

I tecnici sono intervenuti e il sito è tornato regolarmente online intorno alla mezzanotte.


 

Problemi su pannello server WZ2 (Risolto) Critico

Influenzando Server - WZ2

  • 15/01/2019 17:00 - 18/01/2019 15:10
  • Ultimo Aggiornamento 16/01/2019 09:41

A causa di un attacco hacker di oggi pomeriggio, il pannello di controllo Media Panel del server WZ2 è attualmente non operativo.

Tutti i servizi Wowza del server sono funzionanti ma non sono controllabili dal pannello.

Per non interrompere ora tutti i servizi video attualmente in produzione, abbiamo programmato un intervento di risoluzione del problema in tarda serata.

Dopo l'intervento sarà possibile nuovamente accedere al pannello di controllo dei servizi.


Alle ore 01 della notte iniziamo i lavori per riparare i danni dell'attacco e ripristinare il pannello di controllo.

I servizi potrebbero venire sospesi per una decina di minuti.


Purtroppo il danno dell'attacco risulta più grave del previsto. Abbiamo subito ripristinato una copia del server di una settimana fa e tutti i servizi sono operativi.
Qualche istanza EASYTV potrebbe avere playlist e file non aggiornati (se avete fatto delle modifiche negli ultimi giorni).

I servizi LIVE non riscontreranno nessun tipo di problema.

I tecnici sono comunque al lavoro per ricostruire i dati del server principale. In giornata, non appena risolto il problema, rimetteremo in produzione il server primario con i dati aggiornati alle ore 20 di ieri.


Alle 9.38 di oggi (16/1) abbiamo ripristinato il server principale e tutti i dati sono corretti.
Il server e tutti i servizi sono tornati operativi con i dati corretti alla data del 15/01 alle ore 23.

Il riavvio delle 9.38 potrebbe aver causato una caduta dei servizi per circa 2 secondi.


 

MBCloud-118 irraggiungibile. (Risolto) Critico

Influenzando Altro - MBCloud-118

  • 25/12/2018 18:16 - 15/01/2019 10:13
  • Ultimo Aggiornamento 25/12/2018 22:47

Il server MBCloud-122 è attualmente funzionante ma non raggiungibile via rete.

I tecnici sono al lavoro per ripristinare il collegamento nel tempo più breve possibile.


Il server è tornato regolarmente raggiungibile e tutti i servizi funzionanti.


 

MBCloud-122 irraggiungibile. (Risolto) Critico

Influenzando Altro - MBCloud-122

  • 25/12/2018 04:14 - 25/12/2018 18:16
  • Ultimo Aggiornamento 25/12/2018 11:37

Il server MBCloud-122 è attualmente funzionante ma non raggiungibile via rete.

I tecnici sono al lavoro per ripristinare il collegamento nel tempo più breve possibile.


Alle ore 11.33 il disservizio di rete è stato isolato ed il server è tornato normalmente irragiungibile.


 

Aggiornamento programmato server WZ2 (Risolto) Alto

Influenzando Server - WZ2

  • 28/11/2018 00:06 - 20/12/2018 17:05
  • Ultimo Aggiornamento 03/12/2018 02:11

L'aggiornamento del server WZ2, previsto nella nottata tra il 27 e il 28 di novembre 2018 è attualmente sospeso.
Alcuni test effettuati in giornata hanno dato un esito non convincente e abbiamo preferito rimandare di qualche ora per evitare di creare disservizi agli utenti del server.
Sempre su questo post potrete seguire tutte le informazioni sull'aggiornamento e quando prevediamo di riprogrammarlo nelle prossime ore/giorni.
Grazie per l'attenzione.


Nella notte tra il 2 ed il 3 dicembre (lunedì mattina), il server WZ2 è stato aggiornato all'ultima versione con successo.
  • Nuova grafica del pannello
  • pannello molto più stabile e veloce
  • Server Wowza aggiornato all'ultimissima versione
  • Aggiunti nuovi player e la possibilità di scegliere il player preferito
    il player di default è divenuto il nuovo VideoJS, molto potente e sopratutto gratuito. Vi consigliamo di provarlo.
    In ogni caso troverete sempre sia Wowza Player che FlowPlayer da poter scegliere e configurare.
  • Adesso il plugin Facebook LIVE è disponibile anche per le TV Stations (Easy TV)
  • E' disponibile l'opzione HLS Low Latency: permette di accorciare di molto la latenza del flusso video durante il LIVE streaming (da 50 secondi addondanti a circa 15 secondi).
  • Sono stati corretti moltissimi bug minori.

Per qualsiasi chiarimento non esitate a contattarci.

Server NR9 non raggiungibile (Risolto) Critico

Influenzando Server - nr9

  • 02/12/2018 12:39 - 03/12/2018 02:11
  • Ultimo Aggiornamento 02/12/2018 12:47

Da alcuni minuti il server NR9 risulta irraggiungibile.
I nostri tecnici stanno investigando sul problema per risolverlo.


I tecnici hanno già risolto il problema relativo ad un problema di rete interna della webfarm e non del server.
Attualmente tutti i servizi sono tornati raggiungibili.
Il tempo di disservizio è stato di circa 6 minuti.

Aggiornamento server NRF1 (Risolto) Basso

Influenzando Server - NRF 1

  • 27/11/2018 02:46 - 28/11/2018 10:56
  • Ultimo Aggiornamento 28/11/2018 10:56

Stiamo effettuando importanti aggiornamenti sul server NRF1.
Molti dei servizi potrebbero non essere disponibili fino alla fine dei lavori.


Tutti i servizi sul server sono funzionanti. Non ci sono state interruzioni importanti.
L'unico problema, in via di risoluzione, la impossibilità di poter creare nuovi servizi ICECAST su questo server.

Tutto risolto.
Il server è operativo anche nella sezione Icecast.

Server HOST5 irraggiungibile (Risolto) Critico

Influenzando Server - Host5

  • 02/11/2018 11:42 - 06/11/2018 17:49
  • Ultimo Aggiornamento 02/11/2018 11:46

Il server di Hosting HOST5 è attualmente non raggiungibile a causa di un grave guasto di rete.
I tecnici sono al lavoro per la riattivazione nel più breve tempo possibile.


Il server è di nuovo raggiungibile.
Tutti i servizi di hosting sono normalmente funzionanti

Server NR9 irraggiungibile (Risolto) Critico

Influenzando Server - nr9

  • 01/11/2018 15:00 - 02/11/2018 11:42
  • Ultimo Aggiornamento 01/11/2018 15:14

Stiamo riscontrando problemi sul server NR9. 
I tecnici sono già al lavoro per investigare e risolvere il problema.


sembrerebbe un problema a livello di rete:
http://travaux.ovh.net/?do=details&id=35029&PHPSESSID=9d45e2855e64111458c498381edd43f6


Il server é tornato regolarmente online. 
Tutti i servizi sono attivi. 


NR8 in emergenza (Risolto) Critico

Influenzando Server - nr8

  • 12/10/2018 01:59 - 16/10/2018 10:51
  • Ultimo Aggiornamento 12/10/2018 04:25

Attualmente il serve NR8 si trova in stato di emergenza ed è stato sostituito momentaneamente con la copia di backup.
I servizi sono tutti online e stiamo attendendo la risoluzione sul server principale per riattivare il tutto nella normalità.



Il server è stato sostituito con il BACKUP in modo definitivo.


Server A1 (Antenna1 Italia) non raggiungibile (Risolto) Critico

Influenzando Altro - CC-A1-IT-a

  • 12/10/2018 02:02 - 12/10/2018 04:12
  • Ultimo Aggiornamento 12/10/2018 02:29

Il server CC-A1-IT-a di streaming di Antenna1 Italia à al momento non raggiungibile a causa di un disservizio di rete sulla webfarm di Strasburgo.
I tecnici sono al lavoro per il ripristino.
Attualmente non è stato possibile impostare il server di backup



Il problema è stato risolto ed il server è tornato Online con tutti i servizi disponibili.

Situazione riassuntiva aggiornamenti server (Risolto) Alto

Influenzando Altro - Tutti i server NR con Centovacast

  • 10/10/2018 06:39 - 12/10/2018 01:59
  • Ultimo Aggiornamento 10/10/2018 06:47

Alle 5.30 del mattino del giorno 10/10/2018 tutti i server sono stati aggiornati con successo e tutti i servizi sono regolarmente in funzione.

Per tutti i server NR con Centova Cast i tempi di sospensione del servizio durante l'aggiornamento non è stato superiore ai 5/10 minuti.

Solo il server NR8 ha avuto qualche problema per un problema tecnico sopraggiunto durante la fase di aggiornamento.
Sono stati necessari numerosi riavvi e un tempo più lungo per il ripristino dei servizi.

Grazie per la Vostra pazienza. Continuiamo sempre a lavorare per garantivi il massimo della qualità e della sicurezza sui nostri servizi.

Restiamo a disposizione per qualsiasi chiarimento in merito.

Saluti.

NR8 irraggiungibile (Risolto) Critico

Influenzando Server - nr8

  • 10/10/2018 00:07 - 10/10/2018 06:39
  • Ultimo Aggiornamento 10/10/2018 01:04

Il server NR8 sta rispondendo male alle operazioni di aggiornamento software ed è attualmente irraggiungibile.
Questo dovrebbe solo allungare i tempi di indisponibilità dei servizi.
I tecnici sono al lavoro.


Attualmente la piattoforma di emergenza ha sostituito NR8 ed i servizi sono attivi al 95%

Aggiornamento server NR5 - NR6 (Risolto) Alto

Influenzando Altro - Server NR5 - NR6

  • 10/10/2018 02:00 - 10/10/2018 06:47
  • Ultimo Aggiornamento 09/10/2018 12:55

Per motivi tecnici non è stato possibile effettuare l'aggiornamento dei server NR5 e NR6 che erano previsti per la notte passata.

Vista l'urgenza dell'aggiornamento per motivi di sicurezza, abbiamo riprogrammato i lavori per la prossima notte ( tra il 9 ed il 10 ottobre ) intorno alle ore 2.00.

Nonostante i tempi per l'aggiornamento siano di oltre un'ora, il disservizio sui server di streaming (causato dal necessario riavvio della struttura) non supererà i 5 minuti.

Come sempre potrete seguire tutte le operazioni su questo post

Aggiornamento Server NR1/11 Terminato (Risolto) Alto

Influenzando Altro - Server NR5 - NR6 - NR7

  • 09/10/2018 01:00 - 10/10/2018 06:47
  • Ultimo Aggiornamento 09/10/2018 12:50

Nella notte tra il giorno 8 ed il 9 ottobre è previsto un importante aggiornamento di sicurezza dei server NR1/11 - NR5 e NR6
Dalle ore 1.00 fino alle 4.00 sono previste delle possibili interruzioni del servizi di streaming.
Vi preghiamo di non interferire in nessun modo con le operazioni evitando di entrare nel pannello di gestione Centova Cast.
Sono previsti:

  • Aggiornamento del sistema operativo Debian
  • Aggiornamento di Centovacast
  • Manutenzione ordinaria dell'intera macchina

Questi aggiornamenti non sono solo necessari, ma addirittura OBBLIGATORI per continuare ad erogare i servizi nella piena tranquillità e sicurezza.

In realtà l'interruzione dei servizi, salvo problemi in corso di opera, durerà solo pochi minuti, ma l'intervento di manutenzione potrebbe durare 2/3 ore.

Ci scusiamo per gli eventuali disservizi notturni. Potrete seguire tutte le comunicazioni di servizio in questo post.


L'aggiornamento del server NR1/11 è avvenuto con successo e tutti i servizi sono normalmente operativi. I lavori sono terminati alle 3.05 del 9/10/2018.

Per quanto riguarda i server NR5 e NR6 non è stato possibile effettuare l'aggiornamento per motivi tecnici. L'aggiornamento verrò riprogrammato.


Aggiornamento Server NR7, NR8 e NR9 (Risolto) Alto

Influenzando Altro - Server NR7 - NR8 - NR9

  • 10/10/2018 01:00 - 10/10/2018 06:47
  • Ultimo Aggiornamento 09/10/2018 12:49

Nella notte tra il giorno 9 ed il 10 ottobre è previsto un importante aggiornamento di sicurezza dei server NR7 - NR8 e NR9
Dalle ore 1.00 fino alle 4.00 sono previste delle possibili interruzioni del servizi di streaming.
Vi preghiamo di non interferire in nessun modo con le operazioni evitando di entrare nel pannello di gestione Centova Cast.
Sono previsti:

  • Aggiornamento del sistema operativo Debian
  • Aggiornamento di Centovacast
  • Manutenzione ordinaria dell'intera macchina

Questi aggiornamenti non sono solo necessari, ma addirittura OBBLIGATORI per continuare ad erogare i servizi nella piena tranquillità e sicurezza.

In realtà l'interruzione dei servizi, salvo problemi in corso di opera, durerà solo pochi minuti, ma l'intervento di manutenzione potrebbe durare 2/3 ore.

Ci scusiamo per gli eventuali disservizi notturni. Potrete seguire tutte le comunicazioni di servizio in questo post.

Aggiornamento Terminato Server WZ2 (Risolto) Alto

Influenzando Server - WZ2

  • 05/10/2018 02:26 - 06/10/2018 13:55
  • Ultimo Aggiornamento 05/10/2018 03:31

Nella notte tra il 4 ed il 5 ottobre 2018 alle ore 1.45 circa, è stato effettuato un importante aggiornamento di sicurezza al server WZ2:

  • Aggiornamento di Wowza all'ultima versione
    (risolto un problema di sicurezza grave)
  • Correzione dei fusi orari nella schedulazione delle istanze EASYTV
  • Aggiornamenti Flowplayer e JWplayer

Il tempo di interruzione dei servizi è stato di circa 2 minuti.


Aggiornamento terminato Server NR3 e NR4 (Risolto) Alto

Influenzando Altro - Server NR3 e NR4

  • 05/10/2018 01:00 - 06/10/2018 13:55
  • Ultimo Aggiornamento 05/10/2018 03:31

Nella notte tra il 4 ed il 5 ottobre è previsto un importante aggiornamento di sicurezza dei server NR3 e NR4.
Dalle ore 1.00 fino alle 4.00 sono previste delle possibili interruzioni del servizi di streaming.
Vi preghiamo di non interferire in nessun modo con le operazioni evitando di entrare nel pannello di gestione Centova Cast.
Sono previsti:

  • Aggiornamento del sistema operativo Debian
  • Aggiornamento di Centovacast
  • Manutenzione ordinaria dell'intera macchina

Questi aggiornamenti non sono solo necessari, ma addirittura OBBLIGATORI per continuare ad erogare i servizi nella piena tranquillità e sicurezza.

In realtà l'interruzione dei servizi, salvo problemi in corso di opera, durerà solo pochi minuti, ma l'intervento di manutenzione potrebbe durare 2/3 ore.

Ci scusiamo per gli eventuali disservizi notturni. Potrete seguire tutte le comunicazioni di servizio in questo post.


Alle ore 3.15 la manutenzione dei server NR3 e NR4 è terminata e tutti i servizi sono tornati normalmente operativi.
Il tempo di fermo dei servizi Shoutcast ed Icecast è stato in totale di 6 minuti.

Aggiornamento programmato server NR2 Terminat (Risolto) Alto

Influenzando Server - nr2

  • 04/10/2018 01:00 - 05/10/2018 03:30
  • Ultimo Aggiornamento 05/10/2018 03:30

Nella notte tra il 3 ed il 4 ottobre è previsto un importante aggiornamento di sicurezza di tutto il server NR2.
Dalle ore 1.00 fino alle 5.00 sono previste delle possibili interruzioni del servizi di streaming.
Vi preghiamo di non interferire in nessun modo con le operazioni evitando di entrare nel pannello di gestione Centova Cast.
Sono previsti:

  • Aggiornamento del sistema operativo Debian
  • Aggiornamento di Centovacast
  • Manutenzione ordinaria dell'intera macchina

Questi aggiornamenti non sono solo necessari, ma addirittura OBBLIGATORI per continuare ad erogare i servizi nella piena tranquillità e sicurezza.

In realtà l'interruzione dei servizi, salvo problemi in corso di opera, durerà solo pochi minuti, ma l'intervento di manutenzione potrebbe durare 2/3 ore.

Ci scusiamo per gli eventuali disservizi notturni. Potrete seguire tutte le comunicazioni di servizio in questo post.



Alle ore 4.32 la manutenzione del server NR2 è terminata e tutti i servizi sono tornati normalmente operativi.
Il tempo di fermo dei servizi Shoutcast ed Icecast è stato in totale di 8 minuti.

MBCloud 123 e 124 non raggiungibili (Risolto) Critico

Influenzando Altro - Host9, mbcloud-123, mbcloud-124

  • 12/09/2018 00:41 - 12/09/2018 23:58
  • Ultimo Aggiornamento 12/09/2018 23:58

Le 2 istanze di MBcloud in oggetto sono al momento irraggiungibili.
I tecnici sono al lavoro per scoprire e risolvere la problematica.


I tecnici sono ancora al lavoro per la risoluzione del problema.
Sembrerebbe un problema legato al routing di rete.

I tempi di risoluzione si stanno allungando a causa della dimensione del guasto. I tecnici stanno lavorando per il ripristino dei dati.  Non abbiamo ancora una tempistica sulla risoluzione.

I servizi sono tornati disponibili

Rallentamento di rete (Risolto) Alto

Influenzando Server - nr1

  • 10/09/2018 21:15 - 11/09/2018 02:06
  • Ultimo Aggiornamento 10/09/2018 21:19

Il server NR1 alle 21.02 ha riscontrato un rallentamento di rete che lo ha reso parzialmente indisponibile.
Alle 21.04 però tutto sembra tornato alla normalità.  Apriamo questo ticket solo a livello informativo.

Da un indagine sembra che una delle radio ospitate sul server habbia avuto un attacco sulla propria porta. Il firewall ha quindi filtrato e rallentato il traffico sulla macchina a livello protettivo.

Server irraggiungibile (Risolto) Basso

Influenzando Server - NRF 1

  • 27/08/2018 15:49 - 03/09/2018 00:13
  • Ultimo Aggiornamento 27/08/2018 15:56

Il server NRF1 dei servizi gratuiti è attualmente irraggiungibile.
I tecnici sono al lavoro per scoprirne le cause.


Il server NRF1 è tornato regolarmente in linea. dopo 70 secondi.

MBCloud irraggiungibili (Risolto) Critico

Influenzando Altro - MBCloud

  • 26/08/2018 15:51 - 27/08/2018 15:48
  • Ultimo Aggiornamento 26/08/2018 15:52

Alcune istanze di mbcloud sono al momento irraggiungibili.
i tecnici stanno investigando le cause.

Manutenzione straordinaria WZ2 (Risolto) Critico

Influenzando Server - WZ2

  • 25/05/2018 22:24 - 26/05/2018 11:14
  • Ultimo Aggiornamento 25/05/2018 22:46

E' in corso una manutenzione straordinaria sul server video WZ2 a causa di un danno ad un settore dell'hard disk principale.
I servizi torneranno disponibili nel più breve tempo possibile.
Potete seguire gli aggiornamenti su questo post.


Aggiornamento delle ore 22.40:

Il file system è stato riparato.
Tutti i servizi sono tornati regolarmente on-line, compreso il pannello di controllo.

Incidente chiuso

Server Host9, e alcuni MBCloud irraggiungibil (Risolto) Critico

Influenzando Altro - Host9, mbcloud-123, mbcloud-124

  • 24/05/2018 15:49 - 25/05/2018 22:24
  • Ultimo Aggiornamento 25/05/2018 16:11

I server in oggetto sono attualmente irrangiungibili.
I tecnici sono al lavoro per il ripristino.


Aggiornamento:
C'è un grave problema al cluster dove appoggiano le 3 istanze cloud.
Attualmente 2 delle istanze (host9 e mbcloud-124) sono regolarmente funzionanti. Rimane ancora un problema per il servizio MBCloud-123.
I tecnici stanno facendo il possibile per ripristinare il tutto al più presto.

dalle ore 18.30 il cluster è stato completamente ripristinato ed anche l'ultimo server è tornato operativo.

Aggiornamento del 25/5/2018 ore 15.30:
Da circa 30 minuti sono in corso ulteriori interventi sull'host danneggiato.
Si attende il termine dei lavori per il ripristino dei servizi mbcloud-123 e 124.
Nessun problema attualmente su Host9

Aggiornamento:
I lavori sono terminati e tutti i servizi in oggetto sono normalmente disponibili.

Server Host9, e alcuni MBCloud irraggiungibil (Risolto) Critico

Influenzando Altro - Host9, mbcloud-123, mbcloud-124

  • 09/05/2018 17:46 - 15/05/2018 16:41
  • Ultimo Aggiornamento 09/05/2018 18:32

I server in oggetto risultano attualmente non raggiungibili.
I nostri tecnici stanno verificando il problema.


Aggiornamento:
I server sono tutti regolarmente operativi.

Server Host9 irraggiungibile (Risolto) Critico

Influenzando Altro - Host9

  • 08/05/2018 15:09 - 09/05/2018 17:46
  • Ultimo Aggiornamento 08/05/2018 15:28

Il server di hosting HOST9 è attualmente non raggiungibile.
I tecnici stanno investigando sul problema.


Aggiornamento delle 15.26:
Il server host9 è tornato regolarmente raggiungibile. Tutti i servizi sono normalmente operativi.

Problemi su server Host5 (Risolto) Critico

Influenzando Server - Host5

  • 18/04/2018 18:35 - 08/05/2018 15:09
  • Ultimo Aggiornamento 18/04/2018 19:08

Il server Host5 è attualmente irrangiungibile.
I tecnici sono al lavoro per verificarne il motivo e rimetterlo in produzione.


Aggiornamento delle 19.06:
Il server è tornato disponibile e tutti i servizi sono normalmente operativi.
Un sovraccarico del server ha causato un reboot dell'istanza. Essendo molti mesi che il server non si riavviava Linux ha perso un po' di tempo nel controllo dell'integrità del disco.

Migrazione NR5 (Risolto) Critico

Influenzando Server - nr5

  • 05/04/2018 00:00 - 09/04/2018 17:44
  • Ultimo Aggiornamento 05/04/2018 02:24

A seguito dei danni subiti dall'attacco informatico della giornata del 3/4/2018 sul server NR5, abbiamo deciso di migrare i servizi su un nuovo server per ripristinare tutti i servizi senza possibili ricadute di prestazioni.
A partire dalla mezzanotte del 5/4/2018 (la notte tra il 4 e il 5)  i servizi saranno migrati.
Questa operazione potrebbe portare un disservizio sulle connessioni non superiore ai 10 minuti.
Su questo post troverete tutte le eventuali informazioni in merito.
Grazie.


Aggiornamento delle ore 2.23 del 5/4/2018.
La migrazione è stata effettuata con successo e tutti i servizi sono regolarmente ON-LINE. Il tempo di fermo dei servizi è stato di circa 2 minuti.
Per coloro che hanno un servizio con AutoDJ (Easy Radio), ricordiamo che il backup utilizzato per la migrazione (l'ultimo in ottimo stato prima dell'attacco informatico del 3 aprile) risale alle ore 12.00 di lunedì 2/4/2018 (Pasquetta).
Questo significa che qualsiasi variazione a livello di file e di programmazione eventualmente effettuata da lunedì pomeriggio a questa notte sono state perse.
La situazione degli autoDJ è quella appunto delle ore 12 circa di lunedì 2 aprile.
Siete pregati di ricontrollare file e programmazioni se avete fatto delle variazioni dopo tale data.

Ci scusiamo del disservizio dato in questi giorni ma come spiegato precedentemente l'attacco è stato molto forte ed il danno difficile da recuperare senza sofferenze.
Con l'occasione ne abbiamo approfittato per ulteriormente rinforzare la struttura del sistema per cercare di scongiurare sempre più la possibilità che blocchi del genere possano avvenire per tempi lunghi.
Newradio Team

Migrazione NR6 (Risolto) Critico

Influenzando Server - nr6

  • 05/04/2018 00:00 - 09/04/2018 17:44
  • Ultimo Aggiornamento 05/04/2018 01:09

A seguito dei danni subiti dall'attacco informatico della giornata del 3/4/2018 sul server NR6, abbiamo deciso di migrare i servizi su un nuovo server per ripristinare tutti i servizi senza possibili ricadute di prestazioni.
A partire dalla mezzanotte del 5/4/2018 (la notte tra il 4 e il 5)  i servizi saranno migrati.
Questa operazione potrebbe portare un disservizio sulle connessioni non superiore ai 10 minuti.
Su questo post troverete tutte le eventuali informazioni in merito.
Grazie.


Aggiornamento delle ore 0.59 del 5/4/2018.
La migrazione è stata effettuata con successo e tutti i servizi sono regolarmente ON-LINE. Il tempo di fermo dei servizi è stato di circa 2 minuti.
Per coloro che hanno un servizio con AutoDJ (Easy Radio), ricordiamo che il backup utilizzato per la migrazione (l'ultimo in ottimo stato prima dell'attacco informatico del 3 aprile) risale alle ore 12.00 di lunedì 2/4/2018 (Pasquetta).
Questo significa che qualsiasi variazione a livello di file e di programmazione eventualmente effettuata da lunedì pomeriggio a questa notte sono state perse.
La situazione degli autoDJ è quella appunto delle ore 12 circa di lunedì 2 aprile.

Ci scusiamo del disservizio dato in questi giorni ma come spiegato precedentemente l'attacco è stato molto forte ed il danno difficile da recuperare senza sofferenze.
Con l'occasione ne abbiamo approfittato per ulteriormente rinforzare la struttura del sistema per cercare di scongiurare sempre più la possibilità che blocchi del genere possano avvenire per tempi lunghi.
Newradio Team

Problemi su NR5 (Risolto) Critico

Influenzando Server - nr5

  • 04/04/2018 14:12 - 05/04/2018 02:25
  • Ultimo Aggiornamento 04/04/2018 15:55

Salve,
l'attacco informatico di ieri (3/4/2018) ha purtroppo creato dei gravi danni ad alcune parti della memoria e del database del server.
Attualmente i servizi sono funzionanti ma il pannello di controllo Centova Cast non è raggiungibile.

Stiamo ripristinando una nuova istanza del server NR5 dall'ultimo backup che risale alla giornata di lunedì 2/aprile.
L'istanza verrà messa in produzione nella prossima nottata per risolvere definitivamente i problemi.


Aggiornamento:
Anche i servizi stanno avendo un impatto negativo.  Stiamo lavorando per ricostruire le parti danneggiate della memoria e definitivamente risolvere il problema

Aggiornamento delle ore 15.53:
Il nuovo server NR5 è pronto per essere lanciato in sostituzione di quello attualmente in produzione che riscontra problemi su alcuni punti di memoria.
Pensiamo di fare la migrazione (che dovrebbe essere velocissima) in serata o nel pomeriggio in caso di ulteriori problematiche del server attuale

Riavvio server NR5 - NR6 (Risolto) Critico

Influenzando Altro - Server NR5 - NR6

  • 03/04/2018 11:06 - 04/04/2018 14:12
  • Ultimo Aggiornamento 03/04/2018 13:40

E' in corso un riavvio dei server NR5 e NR6  a causa di un attacco informatico in corso sulla struttura.
Il problema dovrebbe essere risolto in brevissimo tempo.


Aggiornamento:
Il danno provocato dall'attacco informatico è più grave del previsto. E' in corso un intervento per il ripristino del ramo cloud contenente i 2 server NR5 e NR6

Aggiornamento:
L'intervento di ripristino dei dati è in corso. Non è ancora disponibile la tempistica della risoluzione. Normalmente è una questione di minuti. Dipende dalla gravità del danno procurato.

Aggiornamento:
i tempi di risoluzione si stanno allungando a causa di un problema che impedisce lo spostamento degli IP su una istanza gemella. E' necessario attendere la risoluzione del problema sull'host principale.
Vista la gravità del danno, i tempi di ricostruzione di una nuova istanza sostitutiva potrebbero essere superiori a quelli si un ripristino di quella normale che potrebbe avvenire nel giro di qualche minuto.
Non resta che attendere. I tecnici sono al lavoro.
Ci scusiamo per l'inconveniente che purtroppo è causato da fattori esterni.

Aggiornamento:
I server sono tornati disponibili.
Stiamo procedendo alla verifica dei servizi

Aggiornamento finale delle ore 13.30:
Tutti i servizi sono stati ripristinati e controllati.
Ci scusiamo per il grave disservizio arrecato.  L'attacco informatico verso l'Host cloud che contiene anche i server NR5 e NR6 è stato particolarmente pesante, tae da sorpassare anche le protezioni anti ddDos presenti sulla infrastruttura.
In particolare il problema più grosso è stato quello di isolare l'attacco sugli indirizzi IP presi di mira.  Anche se le strutture di base sono state ripristinate in pochi minuti, gli IP attaccati sono rimasti isolati per molto tempo prima di individuare ed isolare l'attacco.
Attualmente gli attacchi sono stati fermati e filtrati completamente. La struttura quindi permette nuovamente di rispondere al 100% delle richieste.
Un ringraziamento a tutti i tecnici in webfarm che hanno lavorato per isolare il grave problema nei tempi più brevi possibili (anche se purtroppo molto più lunghi del previsto).

Problema su MBCloud-09 (Risolto) Critico

Influenzando Altro - MBCloud-09

  • 27/03/2018 14:44 - 03/04/2018 11:06
  • Ultimo Aggiornamento 27/03/2018 14:59

Attualmente il server MBCloud-09 non è raggiungibile.
I tecnici stanno investigando sul problema.


Aggiornamento delle 14.57:

il server è tornato disponibile e tutti i servizi collegati sono normalmente attivi.

Problema su server NR9 (Risolto) Critico

Influenzando Server - nr9

  • 27/02/2018 11:42 - 27/03/2018 14:43
  • Ultimo Aggiornamento 27/02/2018 13:15

A seguito di un attacco DDos potente sul server NR9 è stato necessario filtrare il traffico e riavviare il server.
Attualmente l'attacco sembra essere arginato e tutti i servizi stanno tornando operativi.


Aggiornamento delle 11.52:
Il server è ancora sotto attacco DDos. I tecnici sono al lavoro per cercare di arginare il problema.

Aggiornamento delle 12.06:
Ancora il problema non è risolto. Tutti i tecnici sono al lavoro per la risoluzione del problema.
Seguire sempre questo post per tutte le informazioni

L'attacco ha provocato un problema hardware. Uno degli elementi della struttura cloud necessita un intervento:
http://travaux.ovh.net/?do=details&id=30156&PHPSESSID=0ca5786249abc536f894c48e5dc0bab7

Attendiamo che il componente venga sostituito in tempi brevi.

Aggiornamento delle 13.12:
L'istanza cloud è stata ripristinata.
Tutti i servizi sono tornati regolarmente operativi.
Ci scusiamo per l'inconveniente tecnico.

Aggiornamento programmato PLESK (Risolto) Critico

Influenzando Server - Host5

  • 20/02/2018 01:00 - 27/02/2018 11:48
  • Ultimo Aggiornamento 19/02/2018 12:54

Si rende necessario l'aggiornamento di PLESK alla nuova versione di Plesk ONIX che comprende le nuove versioni di PHP e Mysql.
L'aggiornamento dovrebbe durare al massimo 60 minuti.
Durante l'aggiornamento, i siti ospitati potrebbero non essere diponibili.

Problemi su nodi MB Cloud (Risolto) Critico

Influenzando Sistema - Server MB Cloud

  • 18/02/2018 23:39 - 19/02/2018 12:51
  • Ultimo Aggiornamento 19/02/2018 00:04

Attualmente riscontriamo alcuni problemi di raggiungibilità su alcuni MBCloud:
mbcloud-122
mbcloud-123
mbcloud-124

I tecnici stanno investigando per la risoluzione del problema.


Aggiornamento delle 23.55
Problema risolto.
Tutti gli MBCloud sono tornati raggiungibili.

Problemi su NR8 (Risolto) Critico

Influenzando Server - nr8

  • 14/02/2018 12:43 - 18/02/2018 23:39
  • Ultimo Aggiornamento 14/02/2018 12:54

Attualmente il server NR8 non risulta raggiungibile.
I nostri tecnici sono al lavoro per investigare sul problema.
Prossimi aggiornamenti qui.


Aggiornamento delle 12:52
Il server NR8 è stato regolarmente riavviato e tutti i servizi sono tornati regolarmente in funzione.
Le cause del riavvio sembrano derivare da un attacco Hacker DDos molto forte avvenuto sul server 10 minuti fa che hanno costretto il datacenter ad isolare momentaneamente il server.
Ci scusiamo per il disagio.
Tempo totale di disservizio: circa 4 minuti.

Lavori su sito aziendale (Risolto) Critico

Influenzando Altro - Hosting sito aziendale

  • 16/01/2018 09:53 - 01/02/2018 18:47
  • Ultimo Aggiornamento 17/01/2018 10:10

Buongiorno,
da questa notte è stata fatta una importante migrazione del sito aziendale.
Potrebbero esserci in giornata alcuni problemi a raggiungere alcune pagine a causa dell'aggiornamento DNS in corso.
Entro la fine della giornata tutte le parti del sito e dell'area clienti dovrebbe tornare nella normalità.
Per qualsiasi problema contattateci allo 0683393633 oppure a info@newradio.it

Grazie per la vostra attenzione.


Aggiornamento del 17/01/2017 ore 10

Il sito aziendale e l'area clienti è tornata operativa normalmente.

Problemi su PLAY5 (Risolto) Critico

Influenzando Server - Host1

  • 12/01/2018 09:12 - 16/01/2018 03:01
  • Ultimo Aggiornamento 12/01/2018 09:37

Riscontriamo un problema sul server di gestione di PLAY5.
Stiamo investigando.


Aggirnamento 9.25
Attualmente il disservizio è rientrato completamente.
Continuiamo ad indagare per scoprire la causa che ha dato il disservizio.

Host 9 non raggiungibile (Risolto) Critico

Influenzando Server - Altri servizi

  • 08/12/2017 21:42 - 12/01/2018 09:12
  • Ultimo Aggiornamento 09/12/2017 00:29

Il server di Hosting Host9 risulta attualmente non raggiungibile.
I tecnici sono al lavoro per il ripristino.
http://travaux.ovh.net/?do=details&id=28932&PHPSESSID=a66eb0b35990d940892d2920e077245b



Aggiornamento delle ore 0.28:
Il servizio risulta tornato operativo e stabile.

Disguido di rete su NR9 (Risolto) Alto

Influenzando Server - nr9

  • 16/11/2017 09:46 - 08/12/2017 21:42
  • Ultimo Aggiornamento 16/11/2017 09:52

Abbiamo accertato un disservizio a livello di rete sul server NR9.
Il disservizio, che ha reso irraggiungibile il server per circa 3 minuti e 53 secondi, è subito rientrato ed i tecnici stanno investigandone il motivo.
Da un primo approccio sembrerebbe causato da una ggiornamento software avvenuto ad un router che serve la zona del datacenter dove presente il cluster cloud del server.


Aggiornamento:
Il disservizio è stato causato da un forte attacco DDos sul nodo che ha abbassato del 70% le risorse di rete del cluster. Il sistema Anti-DDos è subito intervenuto arginando l'attaccl Hacker dopo pochi secondi.

Attualmente non si riscontrano più limitazioni.

Disservizio generale su OVH del 9 novembre (Risolto) Medio

Influenzando Altro - Intera struttura

  • 10/11/2017 12:11 - 08/12/2017 21:42
  • Ultimo Aggiornamento 10/11/2017 12:17

Tutti i servizi di Newradio causati dal grave guasto dei datacenter OVH del 9 novembre sono stati regolarmente ripristinati entro le ore 16.00 dello stesso giovedì 9 novembre.
Per un approfondimento sull'accaduto vi inviamo al seguente articolo:
https://www.newradio.it/il-caso-ovhdown/

Grazie

Informazioni su disservizio generale del 9-11 (Risolto) Critico

Influenzando Sistema - Intero sistema server

  • 09/11/2017 15:09 - 10/11/2017 12:11
  • Ultimo Aggiornamento 09/11/2017 22:34

Nella giornata di oggi, 9 novembre 2017,  2 grossi guasti hanno interessato le 2 webfarm OVH che ospitano tutti i nostri server.
Alle 7.14 una interruzione di corrente nella webfarm di Strasburgo ha messo i ginocchio migliaia di server di altrettante migliaia di clienti oscurando servizi e siti di mezza Europa. La mancanza di corrente è stata causata da una interruzione da parte della centrale elettrica che fornisce l’energia alla farm.  Il sistema di emergenza con i gruppi elettrogeni non è stato in grado di sostenere la mancanza di corrente per motivi che ancora sono in indagine.
Fatto sta che i servizi sono incominciati a tornare disponibili solo dopo le ore 12 e non tutti contemporaneamente.
Alle ore 15 ancora alcune istanze del sistema Cloud risultano ancora irraggiungibili, tra cui il nostro systema PLAY5 che gestisce i player HTML5 di migliaia di clienti.
Contemporaneamente anche la webfarm di Rubaix alle ore 8.15 ha avuto un guasto a livello di fibra ottica nell’interconnessione con la dorsale europea, con il risultato di rendere irraggiungibili tutti i servizi allacciati a quella regione. Il sistema di fibra ottica è stato ripristinato alle 10.37.
2 disservizi molto gravi che hanno richiesto l’utilizzo di diverse decine di persone e tecnici per vederne una risoluzione.
Questa è la prima comunicazione (tradotta dal francese) rilasciata dal CEO di OVH  Octave Klaba:

Buongiorno,
Prima di tutti i dettagli, due prime informazioni.
Questa mattina abbiamo avuto due incidenti separati che non hanno nulla a che fare con l'altro. Il primo incidente colpisce il nostro sito Strasburgo (SBG) e il secondo Roubaix (RBX). Su SBG abbiamo 3 data center in funzione e 1 in costruzione. Su RBX, abbiamo 7 datacentre in funzione.
SBG:
Su SBG abbiamo avuto un problema elettrico. L'alimentazione è stata ripristinata e i servizi sono riavviati. Alcuni clienti sono UP e altri ancora non.
Se il tuo servizio non è ancora UP, il tempo di ripristino è compreso tra 5 minuti e 3-4 ore. Il nostro sistema di monitoraggio ci permette di sapere quale cliente è ancora impatto e stiamo lavorando per risolverli.
RBX:
Abbiamo avuto un problema sulla rete ottica che consente di collegare RBX ai punti di interconnessione che abbiamo a Parigi, Francoforte, Amsterdam, Londra, Bruxelles. L'origine del problema è un bug software sull'apparecchiatura ottica che ha causato la perdita della configurazione e il taglio della connessione con il nostro sito di RBX. Abbiamo consegnato il backup della configurazione software non appena abbiamo diagnosticato l'origine del problema e la DC è ancora raggiungibile. L'incidente su RBX è chiuso. Con il produttore, stiamo cercando l'origine del bug di software e anche come evitare questo tipo di incidenti critici.
Stiamo procedendo al recupero dei dettagli per fornirvi informazioni sul tempo di recupero di tutti i servizi / clienti SBG. Inoltre, forniremo tutti i dettagli tecnici sull'origine di questi due incidenti.
Siamo sinceramente dispiaciuti. Abbiamo solo 2 eventi simultanei e indipendenti che hanno interessato tutti i clienti rbx dalle 8.15 10:37 ET ogni clienti SBG dalle 7.15 11:15. Continuiamo a lavorare su clienti che non sono ancora UP presso SBG.
sinceramente
.
Ottava.

Attualmente stiamo ancora attendendo che 4 strutture cloud siano ripristinate. Parliamo del sistema di PLAY5 e di alcune istanze di MBCloud.
Siamo molto imbarazzati per l’accaduto. Quello di oggi è il più grande disservizio generale che abbiamo dato ai nostri clienti negli ultimi 10 anni e purtroppo non a causa nostra ma per problematiche sulle infrastrutture utilizzate e da noi non gestite direttamente. Purtroppo problemi di questa portata sono rari e totalmente ingestibili se non con i tempi necessari di intervento tecnico.

Restiamo a disposizione per qualsiasi chiarimento in merito.


Il player HTML5 PLAY5 è tornato regolarmente funzionante alle ore 15.40.

Alle ore 19.00 è rimasta una unica istanza MBCloud da ripristinare:  MBCloud 123.

Alle 21.55 anche MBCloud-123 è tornato operativo.

PLAY5 tornato on-line (Risolto) Critico

Influenzando Altro - PLAY5 DOWN

  • 09/11/2017 15:14 - 10/11/2017 12:11
  • Ultimo Aggiornamento 09/11/2017 15:47

Il player HTML5 PLAY5 è tornato regolarmente funzionante alle ore 15.40.

Disservizio generale su OVH (Risolto) Critico

Influenzando Sistema - Intero network

  • 09/11/2017 13:23 - 09/11/2017 22:34
  • Ultimo Aggiornamento 09/11/2017 14:46

Buongiorno,
questa mattina un guasto ad una centrale elettrica francese ha causato un fermo totale di ben 2 webfarm di OVH dove risiedono tutti i nostri server.
Il guasto ha impattato oltre 40.000 server in tutta Europa mettendo in ginocchio quasi un milione di siti web europei e servizi di ogni genere.
Dalle ore 12.00 circa tutti i servizi sono stati ripristinati tranne ancora una regione dove risiede il server del player PLAY5.  Si prevede il ripristino nel più breve tempo possibile.
Sono centinaia i tecnici che da stamattina alle 7.14 stanno lavorando nella risoluzione del problema che è stato di gravità internazionale.
Ricordiamoci che OVH è la webfarm più importante e grande di Europa.

Più tardi sul sito metteremo una comunicazione dettagliata di tutto quello che è successo in questa mattinata.

Per PLAY5 (il player) è necessario ancora attendere il rispristino del sistema che lo ospita.

Aggiornamenti su questo task e su Facebook

Cordiali saluti.


Aggiornamento delle ore 13.41
Tutti i servizi sono tornati on-line tranne PLAY5.  Stiamo verificando i motivi con i tecnici in webfarm ed i tempi previsti per il ripristino.

Riscontriamo ancora problemi anche le istanze MBCloud n.  118 - 122 -123.

Problemi su Server NR6 (Risolto) Alto

Influenzando Server - nr6

  • 07/11/2017 11:41 - 09/11/2017 13:23
  • Ultimo Aggiornamento 07/11/2017 11:45

In data odierna alle ore 11.30 circa, il server NR6 è stato colpito da un potente attacco DDos che ne ha ridotto per alcuni minuti le funzionalità.
Il nostro sistema di controllo anti DDos è subito intervenuto ma è stato necessario un riavvio completo del server per resettare tutte le problematiche causate dall'attacco.
Attualmente il server è tornato completamente operativo e tutti i servizi regolarmente operativi.

Problemi su 2 istanze MBCloud (Risolto) Critico

Influenzando Altro - mbcloud-09 - mbcloud-118

  • 23/10/2017 00:23 - 03/11/2017 09:57
  • Ultimo Aggiornamento 23/10/2017 10:39

Riscontriamo un problema sulla virtualizzazione di 2 istanze di MBCloud:
mbcloud-09 e mbcloud-118
I nostri tecnici stanno investigando sul problema.


Aggiornamento delle 8.15 del 23/10/2017:
La problematica sembra essere di rete. I server infatti sono regolarmente accesi e funzionanti ma risultano irraggiungibili a livello rete.
I tecnici stanno ancora investigando per trovare il guasto nella connessione di rete che non ne permette la raggiungibilità.
Spiacenti per l'inconveniente, rimaniamo in attesa della risoluzione da parte dei nostri tecnici in webfarm.
Prossimi aggiornamenti qui.

Aggiornamento delle 10.37:
Da circa 10 minuti il disservizio di rete sul nodo interessato sembra risolto.
Tutti i server MBCloud interessati sono tornati regolarmente raggiungibili.
Saluti

Problemi su pannello MediaCP (Risolto) Critico

Influenzando Altro - Server WZ2 e NRF1

  • 17/10/2017 17:18 - 23/10/2017 00:22
  • Ultimo Aggiornamento 18/10/2017 01:04

Attualmente riscontriamo un problema nell'aprire le pagine dei pannelli MediaCP.
Sembra che ci sia un problema sui server di licenza che autorizza l'uso del pannello di gestione.
Tutti i servizi controllati sono normalmente operativi ( servizi Wowza, Shoutcast ed Icecast) ma attualmente non è possibile accedere al pannello per controllarli.
Abbiamo aperto una segnalazione urgente presso la società che gestisce il pannello per la risoluzione del problema.
Prossimi aggiornamenti su questo post.


Aggiornamento delle ore 01.00 del 18/10/2017
Attualmente il server di licenza ha ripreso a funzionare ed i pannelli sono nuovamente raggiungibili.
Pannello a parte, confermiamo comunque che tutti i servizi di streaming sono comunque rimasti sempre operativi.

Problemi su PLAY5 - Risolti (Risolto) Critico

Influenzando Server - Host1

  • 12/10/2017 06:31 - 17/10/2017 17:18
  • Ultimo Aggiornamento 13/10/2017 00:21

Nella notte del 12/10/2017, il server che ospita PLAY5, il nostro player HTML5, è stato hackerato ed è attualmente non raggiungibile.
L'intera struttura del server, compreso il server di backup, sono interessati dall'attacco.
I nostri tecnici sono da ore al lavoro per risolvere il problema ma non abbiamo una tempistica per il ripristino.
Potrete seguire qui tutti gli aggiornamenti continui sulla situazione.


Aggiornamento delle 10.07 del 12/10/2017
I tecnici sono riusciti a trovare la falla di sicurezza aperta durante l'attacco. Stanno adesso lavorando per recuperare i dati.
Contiamo di ripristinare il tutto in tempi brevi.
Aggiornamenti sempre in questo TASK

Aggiornamento delle 13.03 del 12/10/2017
Purtroppo i tempi di ripristino si stanno allungando.
In caso di necessità, contattateci aprendo un ticket e vi invieremo un codice player provvisorio da sostituire a quello di Play5.

Aggiornamento delle ore 14.49 del 12/10/2017
I tecnici hanno ultimato il ripristino dei dati corrotti.
A breve prevediamo di ripristinare il servizio.

Aggiornamento delle ore 15.21 del 12/10/2017
Il server Host1 che gestisce PLAY5 ed il suo gemello sono stati finalmente ripristinati completamente.
I servizzi sono tornati tutti regolarmente in produzione e nessun dato è stato perduto.
I nostri tecnici stanno provvedendo per ampliare ulteriormente le misure di sicurezza per scongiurare che una situazione simile si debba nuovamente verificare.
La nostra società, come ben sapete, tiene molto alla sicurezza e alla ridondanza dei propri servizi. Quello che è accaduto stanotte è frutto di una operazione mirata ad utilizzare queste macchine e tutta la loro potenza di banda e di calcolo per cercare di penetrare su altre macchine molto più importanti delle nostre.
E' la prima volta in 10 anni che diamo un disservizio così lungo su un serve di produzione, ma continueremo sempre a lavorare in modo che questo avvenga sempre con maggior difficoltà da parte dei malintenzionati.
Ancora grazie per la vostra pazienza e collaborazione.

Aggiornamento Shoutcast2 (Risolto) Basso

Influenzando Sistema - Tutti i server streaming Shoutcast2

  • 13/09/2017 04:32 - 12/10/2017 01:36
  • Ultimo Aggiornamento 13/09/2017 04:38

Questa notte dalle ore 3.00 alle 4.15 e stato effettuato su tutte le macchine Centova Cast l'aggiornamento del modulo Shoutcast2 alla nuova versione 2.5.5.732.

L'aggiornamento è stato effettuato perchè finalmente la nuova release è stata considerata stabile.

L'intervento ha causato il riavvio di tutti i server con un disservizio operativo di circa 20 secondi.

Se doveste riscontrare problemi nei prossimi giorni siete pregati gentilmente di comunicarcelo aprendo un ticket di supporto.

Saluti

Server Host5 non raggiungibile (Risolto) Critico

Influenzando Server - Host5

  • 02/09/2017 18:39 - 13/09/2017 04:32
  • Ultimo Aggiornamento 02/09/2017 19:03

Dalle ore 18.30 circa il server di hosting WEB Host5 non è raggiungibile.
I tecnici stanno investigando per risolvere il problema.


Aggiornamento:
alle 18.45 il server host è tornato regolarmente in funzione.
E' stato sostituito un router di rete difettoso.

Manutenzione straordinaria NR8 (Risolto) Alto

Influenzando Server - nr8

  • 17/08/2017 04:32 - 02/09/2017 18:39
  • Ultimo Aggiornamento 17/08/2017 04:35

Alle ore 4.15 della notte del 17/08/2017 il server NR8 è stato indisponibile per circa 3 minuti a causa di un importante aggiornamento di sicurezza.
Tutti i servizi sono tornati normalmente operativi dopo pochi minuti.

Facebook Players OffLine (Risolto) Critico

Influenzando Altro - FaceBook Player

  • 01/08/2017 15:33 - 11/08/2017 11:43
  • Ultimo Aggiornamento 01/08/2017 17:44

Dal pomeriggio di oggi, tutti i Facebook Player sono momentaneamente fuori servizio.
Compare un errore di questo tipo:

Stiamo indagando ma sembrerebbe un problema momentaneo di Facebook. Anche altre applicazioni simili non prodotte da noi rispondono con lo stesso errore.
Siamo in attesa di informazioni aggiuntive da parte di Facebook.
Da una nostra analisi si direbbe un guasto dipendendente dai loro server.
Provate a collegarvi più tardi per vedere se il problema è stato risolto.
Prossimi aggiornamenti qui.


Aggiornamento delle ore 17.42:
attualmente sembra che Facebook abbia risolto il problema con le applicazioni esterne.
Tutti i Facebook Player sono tornati regolarmente on-line.
Siete pregati di verificare nelle prossime ore e farci sapere se dovessero risultare ulteriori problemi.
Saluti

Problemi su PLAY5 (Risolto) Critico

Influenzando Server - Host1

  • 27/07/2017 08:20 - 01/08/2017 15:33
  • Ultimo Aggiornamento 27/07/2017 17:18

Dalle ore 8.00 circa di oggi riscontriamo alcuni problemi sull'infrastruttura del server di PLAY5.
I tecnici sono al lavoro per le opportune verifiche e ripristino.
Potrete seguire qui le prossime informazioni sulla situazione.


Aggiornamento:
I tecnici sono al lavoro per il ripristino del guasto. Non abbiamo al momento previsione dei tempi.

Aggiornamento delle 9.25
Il servizio è stato spostato su un server gemello. Occorre attendere la propagazione del DNS. Nei prossimi minuti i player torneranno visibili.
Continuiamo ad aggiornarvi qui.

Aggiornamento delle 10.57:
Il server PLAY5 è stato sostituito ed i servizi sono tutti in ripresa.
Se ancora non vedete il player sulle vostre pagine dovete attendere ancora la propagazione dei DNS sul vostro provider internet
Nel giro di poco tempo tutti i player torneranno visibili ovunque.

Aggiornamento delle 0re 17:
Dal primo pomeriggio confermiamo che tutti i servizi di Play5 sono regolarmente tornati disponibili su tutti gli operatori.

Disservizio di rete su MUX di Milano (Risolto) Critico

Influenzando Altro - Tutti i server streaming & Hosting

  • 26/07/2017 11:23 - 27/07/2017 08:20
  • Ultimo Aggiornamento 26/07/2017 11:26

Dalle ore 11.15 circa riscontriamo problemi di interconnessione sul Mux di Milano di Telecom.
Alcuni dei nostri server risultano raggiungibili in modo discontinuo.
E' un problema di rete internazionale e non dipende dalla nostra rete.
Durante le verifiche in corso riscontriamo un graduale ritorno alla normalità.
Prossimi aggiornamenti qui.

Problema server FTP (Risolto) Critico

Influenzando Server - WZ2

  • 05/07/2017 11:06
  • Ultimo Aggiornamento 05/07/2017 11:14

In data odierna stiamo riscontrando un problema sull'accesso FTP del server WZ2 video.
Tutti i clienti EasyTV e EasyVod sono al momento impossibilitati a raggiungere il proprio account FTP.
I tecnici sono al lavoro per la risoluzione del problema.
Prossime notizie su questo post.


Aggiornamento delle ore 11.13:
Il server FTP è tornato a funzionare regolarmente.

Istenze MBCloud irraggiungibili (Risolto) Critico

Influenzando Altro - MBCloud

  • 03/07/2017 16:44 - 03/07/2017 18:26
  • Ultimo Aggiornamento 03/07/2017 18:26

E' in corso un disservizio di rete su alcune direttrici dei server MBCloud.
I tecnici stanno verificando.


Aggiornamento:
Tutte le istanze MBCloud sono tornate raggiungibili.

Istenze MBCloud irraggiungibili (Risolto) Critico

Influenzando Sistema - MBCloud

  • 14/06/2017 20:10 - 27/06/2017 18:46
  • Ultimo Aggiornamento 14/06/2017 20:39

Dalle ore 20.00 circa alcune istanze di MBCloud risultano irraggiungibili.
Esattamente dalla 135 alla 150
Crediamo dipenda dal gravissimo guasto della rete Fastweb in corso oggi dalle ore 14.30 ed ancora non risolto.
la rete fastweb è completamente ferma in tutta Italia.
Poichè alcuni server del sistema MBCloud sono situati in Italia, le problematiche di rete nazionale potrebbero aver creato dei problemi.
Stiamo investigando, ma se il problema è causato dalla rete Fastweb non potremo fare nulla fino al ripristino da parte dei loro tecnici.


Aggiornamento delle 20.37:
Le connessioni di rete sono state ristabilite sulla tratta nazionale verso la piattaforma cloud.
Tutti i servizi MBCloud sono tornati operativi e raggiungibili.

Problemi rete Fastweb (Risolto) Critico

Influenzando Altro - Rete Fastweb nazionale

  • 14/06/2017 16:02 - 15/06/2017 01:50
  • Ultimo Aggiornamento 14/06/2017 16:11

Dalle ore 14.30 di oggi la rete Fastweb risulta ferma in tutta Italia per un loro grave problema strutturale.
Non abbiamo informazioni sulla tempistica per il ripristino della rete.

Aggiornamento Programmato Server WSE1 (Risolto) Alto

Influenzando Server - wse1

  • 29/05/2017 19:00 - 14/06/2017 12:58
  • Ultimo Aggiornamento 30/05/2017 00:04

In data 29/5/2017 dalle ore 19.00 fino a conclusione lavori, verrà effettuato un importante aggiornamento della piattaforma WSE1 (Servizi Wowza).
Durante l'aggiornamento siete pregati di non accedere al vostro pannello WSE1 fino a nuova comunicazione a fine lavori.
I servizi video sul pannello potrebbero fermarsi per un tempo limitato che non dovrebbe superare i 30 minuti.
Questo aggiornamento dovrebbe risolvere definitivamente le problematiche dei player HTML5 su alcuni browser come Chrome ed aggiungere alcune funzioni.
Eventuali altre comunicazioni le potrete leggere su questo Task.

Problema nodo di rete su server WSE1, WSE5, N (Risolto) Alto

Influenzando Altro - WSE1, WSE5, NR8

  • 03/05/2017 15:15 - 28/05/2017 09:11
  • Ultimo Aggiornamento 03/05/2017 15:20

Dalle ore 15.11 alle ore 15.14, i server in evidenza sono stati irraggiungibili a causa di un problema di rete interno della nostra webfarm.
In pochi secondi i tecnici hanno subito risolto il problema cambiando il routing di collegamento.
I server sono operativi e funzionanti.
Tempo del disservizio: 2',49"

MBStudio Cloud non raggiungibili (Risolto) Critico

Influenzando Sistema - MB CLOUD

  • 19/04/2017 18:21 - 29/04/2017 18:40
  • Ultimo Aggiornamento 19/04/2017 18:34

Da circa 5 minuti alcuni MBCloud appartenenti ad un preciso nodo risultano irrangiungibili.
I tecnici della nostra webfarm stanno indagando sul motivo.


Aggiornamento:
Alle ore 18.29 tutto il nodo è tornato on-line e tutti gli MBCloud collegati sono tornati operativi.
Nessun problema lato servers. E' stata una momentanea problematica di rete generalizzata su un router della Webfarm.

Problemi su servizio PLAY5 (Risolto) Critico

Influenzando Server - Host1

  • 08/03/2017 15:28 - 09/03/2017 09:55
  • Ultimo Aggiornamento 08/03/2017 15:43

Il servizio PLAY5 (player HTML5) è attualmente fermo per cause tecniche.
I tecnici sono al lavoro per ripristinare al più presto il server.
Potrete seguire qui l'andamento della situazione.


Aggiornamento:
alle ore 15.35 il servizio PLAY5 è tornato regolarmente in funzione.

Manutenzione programmata server NR11 (Risolto) Alto

Influenzando Server - nr11

  • 24/02/2017 05:00 - 24/02/2017 05:30
  • Ultimo Aggiornamento 24/02/2017 05:29

Per la necessità di un aggiornamento software di sicurezza e del pannello Centovacast, verrà effettuata una manutenzione programmata del server NR11/NR1.
L'aggiornamento comporterà una interruzione di servizio di alcuni minuti, prevista nella fascia oraria dalle ore 5.00 alle 5.30 del 24/2/2017 (mattina).
Non è neccessaria nessuna operazione da parte degli utenti presenti sul server.


Aggiornamento:
alle ore 5.11 i lavori di aggiornamento sono terminati con successo.
Tutti i servizi sono regolarmente ripartiti.

DISSERVIZI DI RETE SU INFRASTRUTTURE (Risolto) Alto

Influenzando Altro - NR1-NR11-NR8-WSE1-WSE5

  • 18/02/2017 17:45 - 19/02/2017 12:42
  • Ultimo Aggiornamento 19/02/2017 12:42

I server in oggetto sono stati colpiti da un disservizio di rete durato circa 4 minuti.
Al momento tutti i server sono tornati regolarmente ON-LINE
Continuiamo a tenere sotto controllo le risorse.


aggiornamento:
dopo i controlli effettuati confermiamo che il problema è stato completamente risolto.

Pannelli di controllo WSE non funzionanti (Risolto) Critico

Influenzando Altro - WSE1 / WSE5

  • 31/01/2017 09:05 - 16/02/2017 14:44
  • Ultimo Aggiornamento 31/01/2017 12:41

Da questa mattina i pannelli di controllo dei servizi WSE1 e WSE5 non funzionano.  Al tentativo di collegamento restituiscono un errore di licenza.
Il pannello WSE è distribuito da una azienda brasiliana e l'errore è causato da un loro disguido nel loro sistema licenze.
Siamo in contatto con l'azienda per una veloce risoluzione del problema.

Nonostante che il pannello non sia raggiungibile, i servizi dovrebbero essere tutti funzionanti.
In caso contrario siete pregati di aprire un ticket con le informazioni precise del servizio eventualmente fermo. I nostri tecnici cercheranno di riavviare il servizio senza passare per il pannello WSE.

Ci scusiamo per il disguido ma è totalmente indipendente dalla nostra volonta e controllo tecnico.

Potrete seguire in questo task l'andamento del problea e la sua soluzione.


Aggiornamento delle 12.39

I programmatori di WSE hanno corretto il problema ed i pannelli sono tornati regolarmente On-line.
Ci scusiamo per il disguido arrecato ai nostri clienti.

DISSERVIZI DI RETE SU INFRASTRUTTURE (Risolto) Critico

Influenzando Altro - PLAY5 e MBCloud

  • 26/01/2017 18:56 - 27/01/2017 01:28
  • Ultimo Aggiornamento 27/01/2017 01:28

Dalle ore18.30 circa riscontriamo numerosi problemi di rete su alcuni server della nostra infrastruttura.
Attualmente sembrano essere interessati i servizi di PLAY5 e di alcuni MBCloud.
I tecnici sono al lavoro per ristabilire i servizi alla normalità.
Potrete seguire l'andamento della situazione su questo TASK.


Aggiornamento:
I servizi di Play5 ed MBCloud sono tutti tornati operativi.
Rimane ancora in lavorazione il ripristino di MBCloud-122 (che non risponde al riavvio forzato)
I tecnici continuano a lavorare.

Aggiornamento:
I lavori di ripristino del guasto di rete sono ancora in corso. la maggior parte dei nostri servizi legati alla baia che ha subito il guasto sono tutti ripartiti da molte ore.
Purtroppo rimane ancora in sospeso il server che ospita l'istanza mbcloud.122 che pur essendo in funzione, è ancora completamente isolata a livello di rete.
I tecnici ci garantiscono che ristabiliranno la totalità dei servizi nel più breve tempo possibile.

Aggiornamento:
Anche il servizio MBCloud-122 è stato completamente ripristinato.

MBCloud-07 - Down (Risolto) Critico

Influenzando Altro - MBCloud-07

  • 24/01/2017 17:30 - 26/01/2017 09:54
  • Ultimo Aggiornamento 24/01/2017 17:32

Il server che ospita l'istanza di MBCloud-07 è attualmente ferma.
Stiamo investigando sul problema.

Problemi di rete verso Stati Uniti (Risolto) Alto

Influenzando Altro - Server Streaming

  • 11/01/2017 10:25 - 12/01/2017 22:47
  • Ultimo Aggiornamento 11/01/2017 10:29

Dalle ore 10.09 di questa mattina riscontriamo un rallentamento di rete tra l'Europa e gli Stati Uniti.
E' probabile che ci sia un guasto su una delle BackBone di collegamento internazionale.
Non riscontriamo problemi a livello europeo al momento.
Non appena avremo nuove informazioni in merito le comunicheremo su questo post.

Problemi su dorsale internazionale (Risolto) Critico

Influenzando Altro - Rete Internazionale

  • 06/01/2017 09:41 - 07/01/2017 13:24
  • Ultimo Aggiornamento 06/01/2017 11:24

Dalle ore 9.23 di questa mattina, 6/1/2017, risultano esserci dei gravi problemi di collegamento internazionale con le webfam europee.
Non abbiamo notizie dettagliate perchè anche le comunicazioni telefoniche con i data centers sono interrotte.
Dal nostro monitoraggio nessuno dei nostri server si è fermato ma può risultare irraggiungibile a livello di rete.

Al momento in cui scriviamo sembra che tutti i server siano nuovamente raggiungibili.
Maggiori informazioni sull'accaduto potrete trovarle qui.


Aggiornamento: alle 9.45 sembra tutto ritornato alla normalità e tutti i server nuovamente raggiungibili.
Continuiamo ancora ad indagare sull'accaduto.

Aggiornamento:  Il problema è stato causato da un guasto sul nodo di rete di Strasburgo.

Attualmente i tecnici stanno ultimando i lavori di ripristino.
I nostri  servizi sono comunque tutti normalmente raggiungibili.

Problemi su nuova versione di Chrome e Safari (Risolto) Basso

Influenzando Altro - PLAY5 - Player Html5

  • 06/12/2016 12:24
  • Ultimo Aggiornamento 06/01/2017 11:18

Dall'introduzione del sistema operativo Sierra su Mac ed in particolare dal 6 dicembre 2016 con l'aggiornamento alla versione 55 di Google Chrome, sono state introdotte delle novità che si riperquotono sullo streaming audio:

  • E' stato disabilitato FLASH di default
    Questo comporta che se i player non prevedono il supporto in HTML5 potrebbere non suonare più il flusso di streaming.  In particolare per i flussi in AAC+ che spesso vengono suonati da componenti FLASH dei player.
  • E' bloccato l'utilizzo di Shoutcast 1.
    Questo perchè Shoutcast 1 utilizza una vecchia codifica in HTML1 che viene bloccata dai nuovi browser perchè ritenuto un protocollo pericoloso per la sicurezza.
    In pratica tutti coloro che hanno uno stream in Shoutcast 1 rischiano di non essere più ascoltati su Chrome 55 e Safari su Sierra. Questo vale sia per gli stream in Mp3 che AAC+
    Il problema vale anche per tutti gli aggregatori in rete come Tune-In, RDio, Zeptle etc etc. Sui loro players attualmente shoutcast1 non suona più su Chrome 55 e Safari.


Soluzioni:

Attualmente la nostra società ha trovato il modo di 'aggirare' il problema in alcuni modi:

Per chi ha uno stream in Shoutcast 2 o Icecast l'unico problema potrebbe essere l'utilizzo di AAC+. Stiamo verificando tutti i player PLAY5 in modo da 'forzare' l'utilizzo di HTML5 anche per AAC+.
Nessun problema dovrebbe esserci per gli stream in Mp3
Rimane il problema per le vecchie versioni dei sistemi operativi, in particolare Windows dalla versione Vista in giù (XP, 2000 etc etc). Il codec AAC+ è stato inserito in windows solo dalla versione 7 in poi, quindi nelle versioni precedenti non ci saranno modi di suonare un flusso in AAC+ se non abilitando il plug-in flash su Chrome manualmente. Consigliate sempre di aggiornare sistemi operativi e browser alle ultime versioni.

Per chi ha uno stream in Shoutcast 1 in Mp3 o AAC+, attualmente stiamo gradualmente inserendo un proxy sui player che permette di bypassare provvisoriamente il problema. A causa della grande mole di stream in Shoutcast 1 che abbiamo, i tempi potrebbero non essere immediati. Se avete delle particolari urgenze potete aprire un ticket sulla vostra area clienti per accellerare i tempi di aggiornamento del vostro player.
Se sul vostro sito non usate il nostro player PLAY5, vi consigliamo di farlo. Altri player potrebbero non funzionare più.
Naturalmente (in particolare con AAC+) il funzionamento del player è possibile solo con sistemi operativi e browser aggiornati alle ultime versioni.

La soluzione migliore è sicuramente quella di programmare un passaggio del vostro server da Shoutcast 1 a Shoutcast 2.  la cosa è possibile in modo gratuito ma comporta alcuni piccoli inconvenienti:

  • La perdita delle statistiche storiche del passato
  • Il cambio dei link diretti del flusso (quelli inviati agli aggregatori come Tune-in ad esempio), anche se quelli vecchi continueranno a funzionare regolarmente (ma sarà comunque bene aggiornarli al più presto)
  • La creazione manuale di un authash per la pubblicazione sulla directory di Shoutcast.com (con shoutcast 1 era automatica, con Shoutcast 2 esiste una procedura da effettuare. Nella guida di Shoutcast 2 è ben spiegato come fare).

Rimaniamo comunque a disposizione per qualsiasi chiarimento in merito a questa problematica.
Non esitate a chiamare il nostro supporto clienti per ulteriori informazioni.

AGGIORNAMENTO DEL 15/12/2016

Abbiamo fatto un upgrade di Shoutcast1 che risolve il problema del blocco su Chrome 55 e Safari.
Non è più necessario fare upgrade del server al momento per risolvere il problema di Chrome.

Problema grafico su pannello Centova Cast (Risolto) Medio

Influenzando Altro - Centova Cast - Shoutcast 2

  • 30/11/2016 10:06 - 06/12/2016 12:24
  • Ultimo Aggiornamento 30/11/2016 19:54

Dal 29/11/2016, dopo un normale aggiornamento dei pannelli Centova Cast, si è creato un problema di visualizzazione grafica sui servizi Shoutcast 2.
In pratica i servizi funzionano regolarmente, ma il pannello scrive in alto sulla destra che è OFFLINE (no source connected).
L'informazione data dal pannello è errata. Il server è in realtà normalmente funzionante.
Per verificare il numero degli ascoltatori (che risulta 0 per il pannello) entrare nella sezione Ascoltatori' delle statistiche che funziona regolarmente.
Abbiamo già segnalato il problema agli sviluppatori di Centova Cast e rimaniamo in attesa di un aggiornamento che 'fissi' il problema al più presto.
Troverete qui aggiornamenti sulla risoluzione del problema nelle prossime ore.


Aggiornamento delle ore 19.50:

Gli sviluppatori di CentovaCast hanno appena rilasciato un aggiornamento che corregge l'errore di visualizzazione dello stato del server.
Tutti i nostri sistemi Centovacast sono stati aggiornati e la visualizzazione dello stato e degli ascoltatori è tornata corretta.
Il problema è risolto.

PROBLEMI SU MBSTUDIO CLOUD (Risolto) Critico

Influenzando Altro - MB STUDIO CLOUD

  • 29/11/2016 09:28 - 30/11/2016 10:06
  • Ultimo Aggiornamento 29/11/2016 09:57

Dalle ore 9.25 di oggi riscontriamo un guasto sulla piattaforma cloud che gestisce alcune istanze virtuali del sistema MB CLOUD.

I nostri tecnici stanno intervenendo per risolvere il problema nel minor tempo possibile.

Su questo task potete seguire l'andamento della situazione.


AGGIORNAMENTO:
Alle ore 9.54 tutti i servizi MBCCLoud sono tornati in linea e funzionanti.
Il guasto è stato subito riparato.

Problema sui server WSE video (Risolto) Alto

Influenzando Server - wse1

  • 26/11/2016 00:14 - 29/11/2016 09:28
  • Ultimo Aggiornamento 26/11/2016 00:20

Dalla giornata di ieri risulta lentissimo il LOG-IN a tutti i pannelli WSE MANAGER.
Questo problema è causato da un errore sul loro server di autenticazione delle licenze che sembra essere fuori uso da alcune ore.
I servizi wowza dei server sono normalmente attivi ma rimane la difficoltà di aprire il pannello di gestione.
Abbiamo già più volte sollecitato il ripristino della normaltà del loro sistema di controllo licenze ma continuiamo ad avere risposte 'vaghe'. Crediamo abbiano un problema serio e comunque in risoluzione.
Se dovete accedere al pannello di controllo WSE, dopo aver inserito username e password, attendete a lungo. Normalmente dopo 1/2 minuti dovrebbe comunque farvi entrare.
Questo in attesa che il problema venga risolto.

Potete seguire la situazione su questo Task.

Problemi su rete Europea (Risolto) Critico

Influenzando Altro - Rete - Network

  • 16/11/2016 12:49
  • Ultimo Aggiornamento 16/11/2016 23:34

Da questa mattina si riscontrano alcune difficoltà su alcuni transiti di rete sul nodo di Francoforte-Milano.
Alcuni operatori e direttrici italiane potrebbero avere rallentamenti o difficoltà nelle connessioni verso alcuni servizi.

Il problema è del tutto estraneo alla nostra struttura e dipende da problemi sulle connessioni internazionali.

Nello scusarci per l'eventuale disagio che alcuni clienti potrebbero avere in queste ore, vi confermiamo che stiamo seguendo con attenzione gli sviluppi del disservizio europeo e vi terremo informati su questo post nelle prossime ore.


aggiornamento:

Sembra che il problema derivi da un guasto ad un cavo di fibra ottica dell'operatore INTEROUTE. QUesto operatore gestisce parte del traffico tra Milano / Francoforte / Parigi.
I tecnici sono al lavoro da ore per il ripristino della rete.

Comment by OVH - Wednesday, 16 November 2016, 12:08PM

Interoute is currently experiencing a network outage on the German section of our Transmission network. Our NOC are investigating, initial actions and the estimated time for repair will be communicated to you shortly.


aggiornamento delle 15.45

Il guasto è stato riparato da parte di INTEROUTE. I servizi dovrebbero esse tornati tutti in regolare servizio.
Nel caso qualcuno ancora lamentasse lentezza o disconnessioni, consigliamo di attendere che il bilanciamento di rete internazionale torni normale dopo il cambiamento dei routing da parte degli operatori.
Manteniamo comunque il task aperto fino alla fine dei nostri controlli.

Incidente su NR9 (Risolto) Critico

Influenzando Server - nr9

  • 01/11/2016 09:56
  • Ultimo Aggiornamento 02/11/2016 16:13

Alle ore 9.49 di oggi 1/11/2016 il server NR9 ha avuto un guasto sull' Host cloud che lo ospita.
I nostri tecnici sono prontamente intervenuti ed hanno risolto il problema.

Alle ore 9.53 il server NR9 ha ripreso correttamete a funzionare.

Il DOWNTIME è stato di 4 minuti.

Continuano le verifiche per assicurarsi che tutto sia ripreso correttamente.



Confermiamo che non risultano più problemi sul server NR9 dopo le nostre verifiche.

Pannello NR6 sotto attacco DDos (Risolto) Critico

Influenzando Server - nr6

  • 15/10/2016 11:35 - 16/10/2016 15:40
  • Ultimo Aggiornamento 15/10/2016 11:41

Il server NR6 è da questa mattina alle 5.57 che è in attacco hacker sull' IP del pannello gestionale.
Il sistema di mitigazione del server è subito intervenuto per aspirare il traffico malevolo ed ha ridotto di molto i tempi di risposta del pannello di controllo.
I servizi di streaming di NR6 invece, che sono su un altro IP fuori dall'attacco, non stanno subendo particolari problemi e sono operativi.
Potrebbero aver avuto sensibili contraccolpi per questioni di bilanciamento del traffico sulla scheda di rete del server.

Stiamo attendendo il termine dell'attacco per poter garantire nuovamente l'accesso normale al pannello di controllo.

In caso di necessità e nell'impossibilità di raggiongere facilmente panel6.newradio.it, potete provare con questo altro indirizzo che non comporta problemi:
http://94.23.65.199:2199

Problemi su rete Europea (Risolto) Critico

Influenzando Altro - Tutti i server di streaming

  • 19/09/2016 12:05 - 11/10/2016 11:13
  • Ultimo Aggiornamento 19/09/2016 12:42

Dalla giornata di domenica 18 settembre alle 10.05, è in corso una serie di ripetuti attacchi informatici su numerosi obbiettivi europei che stanno congestionando i nodi di rete in numerosi punti e città europee.
Questo sta comportando numerosi sbilanciamenti di rete che si evidenziano con momentanee perdite di connessione verso i server di streaming.

Gli operatori stanno facendo il possibile per arginare i problemi dovuti all'attacco hacker, ma non abbiamo previsioni per dichiarare quando eventuali ulteriori problematiche cesseranno completamente.

Su questo Post continueremo a tenervi informati.



La problematica ha impattato una dorsale in Fibra che collega i Pop di Milano, Zurigo e Strasburgo.

Al momento attuale ci viene comunicato che alle 11.55 circa le problematiche dovrebbero essere rientrate. Nelle prossime ore il bilanciamento dei routing di rete dovrebbe normalizzarsi e quindi tutto tornare alla normalità.

Continuiamo a mantenere la situazione sotto controllo prima di dichiarare chiuso l'incidente in corso.

Problema su server WSE1 (Risolto) Critico

Influenzando Server - wse1

  • 15/09/2016 06:52 - 19/09/2016 12:10
  • Ultimo Aggiornamento 15/09/2016 10:18

A causa di un aggiornamento in corso il server WSE1, il servizio non è attualmente disponibile.

Ci scusiamo per il protrarsi dell'attesa ma i lavori da parte dei tecnici Wowza per l'upgrade si stanno prolungando più del previsto.



Aggiornamento.

Il server è tornato on-line e tutti i servizi sono attivi.

Ci scusiamo per l'inconveniente non dovuto a nostra volonta.


Problemi su NR5 - NR6 - WSE1 (Risolto) Critico

Influenzando Server - Altri servizi

  • 26/08/2016 10:04 - 26/08/2016 12:23
  • Ultimo Aggiornamento 26/08/2016 12:23

Stiamo riscontrando alcuni problemi sul nodo di rete dove presenti i server: NR5, NR6 e Wse1.
I nostri tecnici sono al lavoro per la risoluzione del problema nel più breve tempo possibile.

Maggiori informazioni tra poco in questo task.

-----
ore 10.25:
I Server colpiti dal disservizio sono attualmente rientrati in produzione e funzionanti.

Stiamo continuando ad investigare sul problema prima di chiudere questo task.

-----
0re 12.22:
Confermiamo nuovamente che Tutto funziona regolarmente.
Possiamo chiudere il task

Problemi rete Fastweb (Risolto) Alto

Influenzando Server - Altri servizi

  • 08/07/2016 11:44 - 23/07/2016 18:31
  • Ultimo Aggiornamento 08/07/2016 15:13

Per un guasto su rete Fastweb, alcuni server non risultano raggiungibili.

Abbiamo segnalato la questione a Fastweb che ci ha risposto che stanno provvedendo a riparare il guasto.

Rimaniamo in attesa.




Sembra che anche Telecom sia interessata dal guasto.  Il problema risiede nel MIX di Milano di Fastweb e Telecom.



Il guasto sembra rientrato da alcuni minuti.
Stiamo verificando ancora eventuali problemi sulla rete.



Il disservizio di rete è stato completamente risolto.
Tutti i server sono tornati completamente raggiungibili da rete Fastweb e Telecom

Disservizio NR5 - NR8 (Risolto) Critico

Influenzando Sistema - NR5 - NR8 - WSE1

  • 17/01/2016 16:42 - 17/01/2016 16:45
  • Ultimo Aggiornamento 18/01/2016 12:57

E' stato segnalato un problema di rete sui server NR5, NR8 e WSE1.

Dopo pochi minuti il disservizio è rientrato ed i server sono tornati disponibili.