Evoswitch / Leaseweb hall 2 problemen

hallo iedereen,

Hierbij de sitecheck:
http://www.webhostingtalk.nl/quickte...=528327&r=1505

Ondervinden jullie ook problemen op hal 2?
Aantal van mijn websites zijn niet meer te benaderen.

Op support vragen krijg ik op het moment ook geen automatische replay dat ze de melding hebben ontvangen.

groetjes,

Michael Jonkers

Stroomstoring in Datahal 2

Probleem lijkt opgelost

hier anders nog niet... en ook volgens leaseweb's noc nog niet.

m.i. inmiddels een routing probleem, omdat eea vanuit leasewebs eigen netwerk prima bereikbaar is en ik extern allemaal timeouts krijg.

Hier is alles weer up al een tijdje. Zal idd dan een routing probleem moeten zijn?
Is ook een deel van datahal 2 geweest, want onze servers zijn niet onderuit geweest.

Onze ns2/fallback MX server hangt als het goed is ook in hal 2, is van 06:18:34 tot 07:21:34 uur down geweest maar niet gereboot volgens het uptime commando:

Code: [Bekijk]

[root@ns2 ~]# uptime
 08:33:00 up 472 days, 16:52,  2 users,  load average: 0.62, 0.21, 0.07

Kreeg van onze colo leverancier wel weer een email dat er een stroomstoring is geweest.. heb dus maar even nagevraagd hoe dit zit

Edit:
Hun antwoord: Klopt. Niet ieder rack is getroffen door de stroomonderbreking, maar de netwerk verbinding van het rack naar de routers wel.

volgens leaseweb support ticket zou alles opgelost moeten zijn.
Kreeg net een mailtje binnen

We experienced a partial power outage in Evoswitch Hall 2. The power has
been restored and everything should be coming back online now.

If not, please reply back with server ID(s) and we will investigate this as
soon as possible.

lijkt dus volgens leaseweb opgelost.

Oorspronkelijk geplaatst door DutchTSE

Onze ns2/fallback MX server hangt als het goed is ook in hal 2, is van 06:18:34 tot 07:21:34 uur down geweest maar niet gereboot volgens het uptime commando:

Code: [Bekijk]

[root@ns2 ~]# uptime
 08:33:00 up 472 days, 16:52,  2 users,  load average: 0.62, 0.21, 0.07

Kreeg van onze colo leverancier wel weer een email dat er een stroomstoring is geweest.. heb dus maar even nagevraagd hoe dit zit

Edit:
Hun antwoord: Klopt. Niet ieder rack is getroffen door de stroomonderbreking, maar de netwerk verbinding van het rack naar de routers wel.

Klopt idd. Is een gedeeltelijke storing geweest. Hier ook enkel de routers down en racks gewoon up. Voorste gedeelte schijnt geraakt te zijn van DH2. Andere hallen weet ik niet.

Wij hebben hier helaas ook last van gehad. Gelukkig viel de impact mee en was het tijdstip gunstig (vroeg in de ochtend), vrijwel alles kwam weer online.
Wel weer een ochtend verziekt met alles controleren e.d.
(we zitten overigens in de EX-reeks in hal 2)

Wij zitten er ook, lastig verhaal dat je redundant -alles toch uitvalt.
Toch maar een eigen UPS op elke redundant powerfeed installeren. (en ja, die sluiten we dan elk ook weer dubble aan, om UPS failure gedoe t e voorkomen)

Toch maar een eigen UPS op elke redundant powerfeed installeren. (en ja, die sluiten we dan elk ook weer dubble aan, om UPS failure gedoe t e voorkomen)

dan was je connectivity alsnog weggeweest...

Beter je connectivity weg dan een complete power failure. In geval van die laatste heb je ook nog eens kans op dataverlies. Zelfs met BBU's heb je altijd een klein risico, omdat je OS vaak ook write caching enzo doet. Elke vorm van write cache uitzetten is natuurlijk de beste oplossing, maar kost heel veel performance.

Connectivity weg? als de uplink switches buiten onze kast down zijn wel, maar dit is inderdaad minder erg dan vanalles en nog wat moeten herstarten.

Dit is wel weer een goede test geweest on te zien of alles wel netjes opstart, en de monitoring alles ziet wat er gezien moet worden.

Alles draait weer, maar het moet een rustige maand worden om nog aan onze SLA's te kunnen voldoen.

Oorspronkelijk geplaatst door Thijsvdbrink

Connectivity weg? als de uplink switches buiten onze kast down zijn wel, maar dit is inderdaad minder erg dan vanalles en nog wat moeten herstarten.

Wij hebben het in een bepaald datacenter vaker meegemaakt dat de provider geen enkele redundante voorziening had om de netwerk apparatuur van stroom te voorzien.
Eigen core netwerk netjes met UPS in rack om uitval van een groep geen uitval van hele colo te laten zijn, maar "upstream" gingen ze telkens down.

In het geval van evo moet je dan hopen dat je uplink nog wel aan is als de hal uitvalt, anders is de rack UPS ook voor niets.