Onderwerp: Explosie "the planet" datacenter

Van "The Planet" forum:

From Doug Erwin:
This evening at 4:55pm CDT in our H1 data center, electrical gear shorted, creating an explosion and fire that knocked down three walls surrounding our electrical equipment room. Thankfully, no one was injured. In addition, no customer servers were damaged or lost.

We have just been allowed into the building to physically inspect the damage. Early indications are that the short was in a high-volume wire conduit. We were not allowed to activate our backup generator plan based on instructions from the fire department.

This is a significant outage, impacting approximately 9,000 servers and 7,500 customers. All members of our support team are in, and all vendors who supply us with data center equipment are on site. Our initial assessment, although early, points to being able to have some service restored by mid-afternoon on Sunday. Rest assured we are working around the clock.

We are in the process of communicating with all affected customers. we are planning to post updates every hour via our forum and in our customer portal. Our interactive voice response system

Bron: http://forums.theplanet.com/index.php?showtopic=90185

Zit je dan met dubbele voeding en redundante switching, ontploft het hele datacenter...

Bizar dat zo'n explosie kan plaatsvinden in een DC. Hopen dat ze snel alles weer terug online hebben.
Laatste tijd lees je toch veel verhalen over de grote dediboeren in de VS waar het even tegenzit.

Ik gok dat het wel een tijdje down blijft.

Oorspronkelijk geplaatst door gjtje

Zit je dan met dubbele voeding en redundante switching, ontploft het hele datacenter...

Alleen de powerrooms/omliggende ruimtes, geen servers van klanten.

Oorspronkelijk geplaatst door Gualcherius

Ik gok dat het wel een tijdje down blijft.

Zaterdagmiddag gebeurd.

Ik voel een stelling van de week aankomen...

Overigens is dit een van de dingen waar je je onmogelijk op kan voorbereiden. Heb je generators standby staan, mogen ze niet aan van de brandweer.

Klopt. Wat me wel tot nadenken zette; veel Nederlandse datacentra hebben PDU's op de vloer zelf staan...

Dat zou dus de volgende stap kunnen zijn, offsite PDU's binnen een straal van 500m van het DC.

Oorspronkelijk geplaatst door Kazuma

Dat zou dus de volgende stap kunnen zijn, offsite PDU's binnen een straal van 500m van het DC.

Dan heb je weer risico van kabelbreuken

Oorspronkelijk geplaatst door Gualcherius

Dan heb je weer risico van kabelbreuken

Dan maak je er twee offsite PDU's of je koop de grond tussen de locaties op

Oorspronkelijk geplaatst door Kazuma

Ik voel een stelling van de week aankomen...

Overigens is dit een van de dingen waar je je onmogelijk op kan voorbereiden. Heb je generators standby staan, mogen ze niet aan van de brandweer.

gebeurde dat laatst ook niet bij KPN?

Of ze offsite of onsite zijn maakt in dit geval helemaal niks uit.

Die dingen mogen van de brandweer niet aan omdat Power weer voor gevaarlijke situaties kan zorgen, zeer logisch.

True, het ging mij eigenlijk meer om de schade aan apparatuur.

Oorspronkelijk geplaatst door Paulewk

Of ze offsite of onsite zijn maakt in dit geval helemaal niks uit.

Die dingen mogen van de brandweer niet aan omdat Power weer voor gevaarlijke situaties kan zorgen, zeer logisch.

Dat snap ik Ik ging alleen even in op santema's reactie dat de meeste Nederlandse DC's een onsite PDU hebben.

Als je dit zo leest, zou er eigenlijk een opstelling moeten zijn geweest waarin dit gedeelte van het stroomnetwerk afgesloten zou kunnen worden, en dat via transformators in een andere ruimte (aan de andere kant van het datacentrum) de power geleverd blijft worden aan de servers.

Op die manier kan de stroom nog wel uitvallen, maar die kan dan een heel stuk sneller weer gerestored worden. Het probleem is nu waarschijnlijk dat ze eerst alle troep moeten opruimen, en daarna zullen er waarschijnlijk nieuwe transformators geplaatst worden, wat allemaal nogal wat tijd kost.