Vanochtend zijn er meerdere servers die op het cluster staan down gegaan
Dit zijn servers 38, 4, 5, 6, 7, 9.
Server 37 draait wel goed.

Deze storing word veroorzaakt door het uitvallen van een schijf in één van de SANs.
Helaas bevat de software waar het SAN op draait een bug welke in bepaalde specifieke condities voor problemen zorgt, wat in dit geval het probleem is.
We zijn bezig om de software opnieuw te installeren.

We verwachten dat deze 'installatie' actie morgenochtend of uiterlijk morgenmiddag pas voltooid is.

Wij vinden dit erg vervelend voor u als klant, wij doen op dit moment ons best om het probleem op te lossen.
De overgang naar het cluster zou juist betere stabiliteit op moeten leveren, tot dusver hebben wij dit niet kunnen waarmaken en dit vinden wij enorm spijtig, juist omdat de overgang naar het cluster voor ons ook een groot moment was waar we lang naar hebben uitgekeken.

U kunt gebruik maken van de up-time garantie die wij bieden, u krijgt dan het betaalde bedrag van deze maand terug.
Neem hiervoor contact op met de helpdesk met uw factuur nummer + uw rekening gegevens.
Wij weten dat dit de pijn van de downtime niet verzacht, dit is op dit moment echter het minste wat wij kunnen doen.

Wij blijven vandaag en vannacht werken aan een oplossing. Waarschijnlijk zullen we echter moeten wachten tot deze 'installatie' actie voorbij is.

<Update 25-02-2:30uur>
Geachte heer/mevrouw,

Wij zijn nog steeds hard bezig om onze SAN weer terug te krijgen op de normale snelheid.
Wij boeken hier op dit moment vooruitgang, sommige servers werken namelijk alweer een stuk sneller.

Zodra dit probleem definitief opgelost is zult u gebruik kunnen maken van een zeer snelle en bereikbare server en zullen deze problemen definitief opgelost zijn.
Indien er een server zal uitvallen word deze in de toekomst automatisch weer opgestart op een andere server binnen hetzelfde cluster.

De SAN's/ centrale opslag is dubbel uitgevoerd en repliceert alle data elke seconden, in geval van een dergelijke storing als vandaag kunnen wij dan binnen 10 seconden overschakelen op SAN2 waardoor u in principe niks merkt van de problemen op SAN1.

Deze setup zal onze kwaliteit en uptime sterk bevorderen maar heeft ons vandaag helaas door een kinderziekte in de onderliggende software in de steek gelaten.
Wij hebben hier onze lering uitgetrokken en zullen hierdoor in de toekomst een nog betere dienstverlenging kunnen garanderen.

Wij hopen op uw begrip en doen ons uiterste best alles weer zo spoedig mogelijk in de oude staat terug online te hebben.

 <Update 25-02-2011 - 10:00uur>

Momenteel komen de servers weer langzaam op.
Op dit moment zijn Server 3,6,9 en 38 nog down.
Server 4, 5 en 7 zijn weer up.

<Update 25-02-2011 - 10:30uur>
Alle servers zijn weer up and running.
Momenteel ondervinden wij geen storingen meer in het cluster

<Update 27-02-2011 - 7:10uur>
Na twee dagen uitvoerig testen en controleren hebben wij nog geen problemen ondervonden.
Hiermee sluiten wij deze melding over de verstoring.