Tuurlijk had het voorkomen kunnen worden als je een master master setup had over meerdere datacenters...
Afdrukvoorbeeld
Tuurlijk had het voorkomen kunnen worden als je een master master setup had over meerdere datacenters...
Denk ik reageer maar tot nu toe niet maar even ter bevestiging, ja dat kan idd.
Wij hebben daar ook nog wat spul draaien, staat in HA failover met een ander DC, niets gemerkt los van wat gesneuvelde schijven. Hoe dan ook, dit is wel gewoon rampzalig en idd een nachtmerrie waar je maag gewoon van omdraait als je weet dat je verder geen kant op kan ;)
mwah daar ben ik het niet mee eens, redundantie houdt niet op bij een dubbele ups. het is ook nadenken over wat als scenarios, zoals bvb het inbouwen van bypassen op stragische plekken. Als dus blijkt dat er onderdelen in je kritische infra zitten welke niet binnen 7 uur vervangen kunnen worden dan is er toch wel iets goed mis hoor.
Een eventueel "probleem" is natuurlijk ook dat EasyNet al heel wat keren van eigenaar gewisselt is en wellicht niet iedereen het zelfde beleid gevoerd heeft?
Verder kan je netwerkonderhoud makkelijk plegen, maar even de infra voor stroom vervangen kan niet, niet iedereen heeft A+B en dan is het lastig om even een feed uit te zetten.
Wellicht waren er dus mensen binnen EasyNet zich wel degelijk bewust van bepaalde risico's maar konden ze er niet op acteren omdat het zou betekenen dat de stroom er voor een bepaalde periode af zou moeten wat in een DC gewoon niet kan.
Een netwerk kan je voor 30 seconde best wel uit zetten, maar even 30 seconde de stroom er af kost uren recovery, nog maar te zwijgen over de communicatie die je van te voren met je klanten moet voeren om dit allemaal af te stemmen.
Je kunt nooit alle situaties afvangen en wellicht was het gewoon een kwestie van pech / samenloop van omstandigheden...
Maar wat ik dan niet snap is dat er tijdens of na een storing altijd een chronisch gebrek aan communicatie is. Zeg gewoon wat er aan de hand is, of wat je denk dat er aan de hand is geweest, dan gaat men niet speculeren en krijg je geen indianen verhalen.
Het zal mij niks verbazen als er nooit een duidelijk antwoord komt op de vraag hoe dit heeft kunnen gebeuren. Kijk maar naar de storing bij Gyro van een tijdje terug, daar weet ook (bijna) niemand hoe dat nou heeft kunnen gebeuren.
Ik neem aan dat je de storing bij PCextreme bedoeld, klopt dat? Mogelijk dat Wido daar iets over kan zeggen/kan regelen dat er meer informatie richting klanten wordt gestuurd.
Verder heeft Easynet in de afgelopen 5 (?) jaar eerder te maken gehad met enkele serieuze stroom/koel storingen als ik me niet vergis.
Ik begreep van Leaseweb dat in delen van EasyNet zowel de A- als de B-feed eruit lagen, dus zelfs met dubbele voeding lag het plat.
Er zijn best een hoop (access) switches die geen dubbele voeding hebben. Of alleen een (DC) aansluiting voor een aparte (dure) extra voeding.
Ja, dan kun je met een ATS gaan werken, of de switch redundant maken en tweede switch op B-feed etc, maar goed, ik kan me prima voorstellen dat een datacenter veel moeite zal hebben om maintenance aan de stroomvoorziening te plannen.
En gegeven wat een datacenter pretendeert, mogen klanten best klagen als één feed uitvalt.
(mensen die janken als een heel DC uitvalt hadden ook maar gewoon redundant in een ander DC moeten staan enzo )
Ik was tijdens de storing een halve dag in EasyNet, inderdaad, wat een slechte communicatie! Ik kon zelfs zo naar binnen lopen zonder mij te hoeven legitimeren (!).
Waarom het allemaal zolang heeft geduurd komt grofweg door samenloop van omstandigheden en heel veel pech. De generatoren zijn namelijk gewoon opgestart nadat de stroom wegviel, echter kon de generator zijn opgewekte stroom niet kwijt. Na uren zoeken, bleek achteraf dat een schakelaar defect was, deze mocht en kon niet vervangen worden door iedere elektricien maar moest een expert op locatie komen.
Om te achterhalen in welke suite de schakelaar defect was, zijn ze per ruimte gaan schakelen.
Ik denk dat ze binnen enkele dagen wel met een RFO komen.
En stel nu dat het Zombie Control Center in dat DC stond?
Voor switches en firewalls met maar 1 voeding, zijn er toch STS/ATSen? Ja, die kosten een paar 100 euro, maar die gebruik je toch?!!
Daar heb je weinig aan als je A en B feed eruit ligt :)