Binnenkort verhuizen we de hoofd Secondary DNS machine. Er zal zullen geen onderbrekingen plaatsvinden van alle diensten.

- www.nettuning.info overgezet.
- Interne fallback overgezet.
- DNS: test fase.

* 13-02-2009
Verhuizing compleet. Geen onderbrekingen hebben plaatsgevonden.

Themis - VPS server offline.
Door een gekke onbekende oorzaak als de server online gaat (zelfs zonder software draaiend) gaat het hele Datacenter over de kop. Alle routers, switches etc crashen.

Dus niet alleen Net Tuning gaat down maar vele vele andere klanten in het datacenter ook.

We zijn bezig om het op te lossen maar weten de oorzaak niet.

We hopen dat het vanavond weer als vanouds draait.

We zijn al de hele dag non-stop bezig.

We gaan nu met zijn allen even een hapje eten en brain stormen.
[17:30]

Om 18:00 weer verder gegaan.
En enige dingen gevonden waarom dit werd veroorzaakt.

Nadat rond 21:00 het netwerk weer stabiel was en de VPS server online was, was er nog geen netwerk verkeer tussen VPS verkeer en Node (de server). Bleek dus wat wij uit hadden gezet zeer essentieel is voor OpenVZ intern verkeer. na wat forum postings her en der hebben we die instelling weer aangezet maar een ander netwerk instelling uitgezet. Nu word er enig protocol verkeer niet meer verzonden op het netwerk en daarom gaan nu ook de routers en switches van heel datacenter niet meer over hun nek.

*** 22:00 *** netwerk stabiel bevonden en VPS server online.

*** 8.30 *** Probleem keert terug, er wordt druk gekeken naar de oorzaak van deze voor ons vreemde storing, netwerk technici proberen verschillende situaties uit om alle mogelijke oorzaken zoveel mogelijk uit te sluiten, hierdoor zal het probleem makkelijker makkelijk te decteren zijn. Klanten die bij ons een SLA hebben afgesloten zijn reeds online via onze backup VPS servers. Wij hopen zo snel mogelijk alle VPS diensten online te krijgen. Onze excuses voor het ongemak.

HyperVM software update zat een bug in. Na melding heeft Lxlabs de bug opgelost.

Hyperion webserver in storing 04:00 (Harddisk defect)Update: 08:00 datacenter opdracht gegeven voor vervangen defect. hdd.
Update: 10:30 datacenter nogmaals verzocht voor reboot na enige werkzaamheden aan de server.
Update: 11:30 Server I/O errors niet verholpen, vermoedelijk 2de defecte hdd Update: 13:15 Sever online, 2 harddisks vervangen, raid + data hersteld

Update: 17:00 Server onderhoud.
Update: 17:15 Hardware probleem (na nieuwe HardDisk vervanging)

Update: 22:15 Server online

Getroffen Dienst: Webhosting service cluster. Sommige websites niet of slecht bereikbaar.

Hyperion server in storing 17:00

Update: 18:00 1 harddisk overleden.

Update: 18:00 OS harddisk reparatie.

Update: 21:00 Restore Userdata gestart op tijdelijke Partitie.

Update: 22:30 Restore is op 75%

Update: 23:00 Restore completed. Server rebooted.

Update: 23:15 Server is gestart en alle services draaien.
Hij kan nog wel even traag reageren, Hij heeft het erg druk.

VPS Hosting gelanceerd

Vanaf 14:30 zijn er problemen met enkele domein namen.
Update: In de loop van het weekend is alles weer werkend.

Tussen 17:15 en 17:45 Was er een stroom storing.

Core Switch herstart om 20:30.
Nieuwe Extra Switch in gebruik genomen wegens uitbreiding netwerk poorten (24 extra Gbit poorten).

Webserver Leto (windows Hosting) functioneerde niet geheel naar behoren. Alle domein namen waren offline.Volgens sommige klanten was dit al enkele dagen zo. 20:30 is dit probleem opgelost en komen alle domeinen weer in de " lucht ".

Mailserver software upgraded. Bij problemen meld het ons.

Op de cPanel server (Hyperion) werkt op dit moment de Webmail HORDE niet.

Om 23:50 Een DDoS aanval op Hyperion (webserver)
Op dit moment 25-06-2007 om 01:31 is de aanval nog steeds bezig. Firewall houd het tegen maar de Webserver heeft het druk met tegenhouden van het dataverkeer.

Rond 07:00 Aanval gestopt.
Alles weer normaal.