[17:29] Een van onze engineers heeft een partitieprobleem geconstateerd op server fermium

[18:02] De partitie wordt momenteel hersteld

[18:23] Manuele interactie bljkt vereist, een engineer is onderweg

[18:41] Server weer operationeel

Zojuist is geconstateerd dat server URANIUM uitval van diverse services vertoont. Wij onderzoeken het probleem.

[9:29] Er zijn fouten geconstateerd in een van de primaire opslagmodules.

[10:18] Handmatige correctie van gebroken nodes wordt doorgelopen.

[11:04] Er is hardwarematig falen geconstateerd in een van de modules, deze zal worden vervangen.

[12:44] De opslagcluster is volledig hersteld en de storing daarmee verholpen.

[14:21] Na de initiele opslagmodule blijken nu ook de overige opslagmodules te falen. Alle accounts worden gemigreerd naar een andere cluster.

[15:15] De migratie is in volle gang. Zodra de migratie is voltooid zal uw website actief raken.

[16:12] De migratie is voltooid, alle accounts zijn weer volledig actief.

In de nacht van dinsdag 6 oktober 2009 zal er tijdens het onderhoudsvenster een herstructurering plaatsvinden van onze primaire netwerklaag. Hierbij zullen ondermeer implementatievoorbereidingen getroffen worden t.b.v. IPv6 en zal er een additionele carrier worden aangesloten om uitbreiding van ons netwerk mogelijk te maken. In dit kader is verplaatsing van onze hoofdinfrastructuur noodzakelijk.

Tijdens de werkzaamheden zullen enkele diensten gedurende korte tijd onderbroken worden. Alle noodzakelijke back-up faciliteiten zullen uiteraard zoals normaal blijven functioneren en daarmee de beschikbaarheid van kritische voorzieningen (zoals e-mail) waarborgen.

Voor meer informatie kunt u zich telefonisch tot uw account manager wenden, welke tezamen met u een nader plan van aanpak kan bespreken.

[Update 1:42]

Fase 1 is afgerond. De primaire netwerklaag is online. Secundaire delen worden binnen de komende 45 minuten online verwacht.

[09:21] Om nog onbekende reden functioneren enkele services op server uranium niet naar behoren. Onze technici onderzoeken het probleem.

[09:53] Een van onze technici is ter plaatse.

[10:12] Problemen aan het systeem zijn verholpen en alles functioneert weer naar behoren.

Tijdens het onderhoudsvenster zullen zowel PHP als MySQL worden geupdate naar de laatste versies.

PHP 4.4.9
PHP 5.2.10

Gedurende het onderhoudsvenster zal er routineonderhoud gepleegd worden aan de infrastructuur te Frankfurt. Er worden geen onderbrekingen verwacht, desondanks kunt u tijdelijk lichtelijke vertragingen ondervinden.

Op server indium zullen tijdens het onderhoudsvenster enkele aanpassingen gemaakt worden aan het mailsysteem. U kunt daarbij tijdelijk beperkte uitleesmogelijkheden hebben.

Op dit moment zijn er load issues op server indium. Onze systeembeheerders werken aan een oplossing.

[update]

De loadissues zijn opgelost. Door een volgelopen buffer is een van de apache processen in een loop geraakt, hetgeen voor vertraging zorgde op de infrastructuur.