Onderwerp: Stroomstoring Easynet

Als je in een DC een A+B feed krijgt, en je equipment heeft geen redundante voedingen, dan plaats je toch een STS? Het lijkt me dat in dit geval, de mensen die WEL hun boeltje correct aangesloten hadden (met STS of met redundante voedingen), de dupe waren. Had immers iedereen alles redundant aangesloten, had gisterenavond gewoon beslist kunnen worden om de B feed pas vandaag te herstellen, als er een gekwalificeerd iemand aanwezig was. Omdat blijkbaar veel mensen hun boeltje niet correct aansluiten, hebben diegene die het wel redundant aansluiten, downtime gehad lijkt me.

Gelukkig is nu: 8:38 alles weer online. Maar bij een vriend van mij zijn de servers nog steeds niet online!

Frankse

zowel de A als de B feed zijn er uitgeklapt. (deels) bij normaal stroom gebruik.
hierdoor moest alles door Easynet vervangen worden dus moet alles plat.

Alles is nu vervangen en werkt zoals het hoort.

Verder ontvangt elke klant binnenkort meer uitleg

Rick, ik lees op de "officiele" posting van je medewerker dat je de B-feed samen met de A-feed geduwd hebt en dat de "A+B" feed dan gesprongen is?

Nuja officieel dient een B feed ook alleen als backup feed en niet als extra feed!

Hier nog minimaal 2 servers offline. Wie is er nog in het datacentrum of gaat er zo heen? Anders ga ik er zo heen.

Hier helaas nog alles offline.

Oorspronkelijk geplaatst door Sorce

Dacht al, alles weg! 2 a 3 gigabyte/sec qua trafic in een keer weg. Maargoed, hopelijk is het snel opgelost!

Ja amai, 3 gigabyte/sec is rond de 24 gigabit/sec ... welk netwerk trekt zoveel? :-)

Oorspronkelijk geplaatst door VinceSTM

Bij mij error op de noc bak: localhost interface was verdwenen.

Nieuw kaartje gestoken?

Ontopic dan maar... denk niet dat een STS zou geholpen hebben, gezien de dingen die dan op de B feed hingen (en hem overloadden) op de A zouden springen, waardoor deze hetzelfde probleem zou zien als nu gebeurd is... Misschien is er toch nog iets goeds aan het InterXion-Brussels-meet-alle-stroom-en -beslist-op-basis-daarvan-of-die-machine-nog-wel-in-je-rack-bij-mag-op-de- 16A-stroomvoorziening...

als er nog ùmensen zijn die problemen hebben kunnen we wel helpen aangezien we op weg zijn naar amsterdam.

0032 499 123 707

Idem dito, verwacht er om 13:00 te zijn. Geen idee of iedereen hier in de zelfde suite (1N) zit en in dezelfde kooi, linksig achterin?
Niet dus, melding was dat je er alleen in komt als het aan bovenstaande gerelateerd is.

Kooien zouden verboden moeten worden, maar dat is een ander punt.

dus alsnog een meet? :P

Oorspronkelijk geplaatst door frankske

Rick, ik lees op de "officiele" posting van je medewerker dat je de B-feed samen met de A-feed geduwd hebt en dat de "A+B" feed dan gesprongen is?

de B-feed is in eerste instantie (deels) gesprongen. racks die gebruik maakten van deze B-feed waren dus offline (sommigen gebruiken voor de bovenste helft de A-feed, onderste helft de B-feed).

Omdat de B-feed niet gerepareerd kon worden op dat moment is ons verzekerd dat alles op de A-feeds kon draaien, m.a.w. we hebben de racks die half offline waren omgedrukt naar hun A-feed. Echter achteraf bleek dat de A-feed hier helemaal niet op voorbereid was en hier dus net zo hard een fase eruit knalde.

Omdat we daardoor 30(!) stroomgroepen te weinig kwamen is besloten toch een manier te vinden de zekeringen te vervangen door easynet. Echter zodra je met 1 fase aan de haal gaat moeten ze allemaal offline, gevolg dat de racks die nog op een fase van de A-feed zaten die wel online was ook offline gingen.

Al met al een hoop gezeur wat niet nodig had moeten zijn. Laten we het daar over een zijn. Ook hebben we op dit gehele process geen invloed kunnen uitoefenen, hiervoor zijn wij ook afhankelijk van easynet. En het had nooit mogen gebeuren, dat is ook een feit. Zodra er meer concrete informatie etc is wordt dit gecommuniceerd naar de klanten, maar op dit moment is het voor ons zaak even een paar uurtjes slaap in te halen en vervolgens de situatie rustig te analyseren, snachs om half 7 wil dat niet zo goed meer

Alles draait hier nu weer.

Dat alles er door zou vliegen als de B-feed bij de A-feed op zou worden gezet zou te verwachten zijn als eerst de B-feed is gesprongen en ze ongeveer net zoveel zouden moeten kunnen hebben. Wel is het opvallend dat er 's nachts niemand te vinden was die gediplomeerd was om de zekering te vervangen.

Daarnaast is het zo dat het wel zo netjes was om de klanten vooraf in te lichten dat de stroom er totaal af ging (toen hij er met opzet af werd gehaald). Dit had mogelijk beter gekund.

Hmm, de backupserver heeft de uitval om 2:21 niet overleeft, toch een reden om naar het DC te gaan (helaas )).

Oorspronkelijk geplaatst door Mark17

Alles draait hier nu weer.

Dat alles er door zou vliegen als de B-feed bij de A-feed op zou worden gezet zou te verwachten zijn als eerst de B-feed is gesprongen en ze ongeveer net zoveel zouden moeten kunnen hebben. Wel is het opvallend dat er 's nachts niemand te vinden was die gediplomeerd was om de zekering te vervangen.

Daarnaast is het zo dat het wel zo netjes was om de klanten vooraf in te lichten dat de stroom er totaal af ging (toen hij er met opzet af werd gehaald). Dit had mogelijk beter gekund.

Wij zijn ruim op tijd op de hoogte gesteld, zodat wij nog snel een extra backup konden trekken en de servers netjes af konden sluiten.

Daarnaast vraag ik me af hoe easynet naar gediplomeerde electrotechnici heeft gezocht, ik had er minstens 2 beschikbaar om in te zetten die binnen 20 minuten in easynet hadden kunnen zijn.