Bekijk Volledige Versie : EasyNet stroomstoring?
http://leasewebnoc.com/en/networkstatus/leaseweb-nl-easynet-power-issue
Suc6 daar!
whatskebuurt? draaien ze op UPS/Generator momenteel of ligt er een deel plat of is er slechts 1 feed plat
Noodgeneratoren werken niet, en powerfeed A ligt plat.
Kevin Bentlage
01/10/13, 13:22
Blijkbaar draaien de servers wel, maar ligt de feed welke hun switching voedt plat! SPOF?
Andere providers met eigen netwerken zijn toch ook offline ? Dus de SPOF is niet alleen LSW.
HAHHAHAHAH A en B plat. Is hun B(backup) diesel?Zullen we het hier wel vriendelijk houden?
Geen enkel zelf respecterend DC (en dat zijn de mensen bij easyNet ook) staat hier om te lachen. Een DC runnen is een complexe taak waar nu blijkbaar iets goed fout gaat.
Niemand gaat vanaf nu nog in op lsmodern :) Ik snap dat de vingers jeuken!
Was ik al niet van plan, heb nu wel wat beters te doen dan met een trol te gaan discussieren.
http://leasewebnoc.com/en/networkstatus/leaseweb-nl-easynet-power-issue
Niemand gaat vanaf nu nog in op lsmodern :) Ik snap dat de vingers jeuken!
Ban m gewoon en delete zn posts. Staat toch niks zinnigs in.
Ban m gewoon en delete zn posts. Staat toch niks zinnigs in.
We zijn het wachtwoord kwijt van de banhammer ;-)
Update: Ron heeft in keeppass het juiste wachtwoord gevonden!
Maar ik hoor via-via dat de stroom er al 2 uur uit ligt? Dat is wel het moment dat mijn huis-tuin-en-keuken power link een hogere uptime heeft hoor. Zuigende materie :-(
Het ligt er al bijna 4 uur uit... We hebben nog van oudsher een VPS bij een provider daaro, en nog een colo draaien. VPS ligt er al 4 uur uit, en gelukkig draait die colo nog.
Met de nadruk is "nog"...
het is wel om te huilen dat het zo lang duurt. Via iemand die daar ter plekke is, schijnt dat de dieselgeneratoren wel draaien, maar geen stroom leveren. dus behalve een kapotte transformator en wie weet wat er nog meer niet werkt, is dat dus ook een van de redenen.
Los van het feit dat de backup het dus niet doet, vind ik het ook vreemd dat een probleem in de A-feed niet binnen 4 uur gefixt kan worden. Was al geen fan van EasyNet, en nu nog minder...
Vanaf 10 uur aan de gang, letterlijk waanzin dat het zo lang kan duren bij een datacenter met zowel een A als B voeding.
http://smokeping.clanhost.nl/cgi-bin/smokeping.cgi?target=Netherlands.Concepts
zelfs Liander is nu bezig met het probleem :-(
Ik mag toch aannemen dat EasyNet ook regelmatig hun backup infra test? Sta er al een paar jaar niet meer, juist door dergelijke problemen.
Das opzich vrij logisch als het in de trafo zit. Daar zit nl een deel in wat van Liander is en waar de techs van EN niet aan mogen komen. Hopelijk kunnen ze snel het euvel vinden. Power outage sucks.
dcopruiming
01/10/13, 15:57
ik snap alleen niet waarom een brakke trafo voorkomt dat de gensets het overnemen?
Lijkt me dat dat juist het doel is van de gensets
ik snap alleen niet waarom een brakke trafo voorkomt dat de gensets het overnemen?
Lijkt me dat dat juist het doel is van de gensets
Dit is speculatie, maar wat er gebeurd ZOU KUNNEN zijn is dat er door piek spanning bij het wegvallen van de trafo, delen van de electrische installatie (denk aan hoofdverdeler, etc) versmolten zijn. Je ziet wel vaker dat bij het schakelen van hele grote lasten er een vlamboog onstaat waneer de aparatuur verouderd/vies/overbelast is.
dcopruiming
01/10/13, 16:42
Dit is speculatie, maar wat er gebeurd ZOU KUNNEN zijn is dat er door piek spanning bij het wegvallen van de trafo, delen van de electrische installatie (denk aan hoofdverdeler, etc) versmolten zijn. Je ziet wel vaker dat bij het schakelen van hele grote lasten er een vlamboog onstaat waneer de aparatuur verouderd/vies/overbelast is.
met het uitblijven van info is zowat alles speculatie natuurlijk
voor zover ik me kan herinneren is Easynet niet 2N en hangen de upsen achter 1 hoofdverdeler gevoed door gensets en net.
aangezien de b feed wel functioneert, athans dat idee krijg ik uit de berichten, lijkt me eerder een ups dan de hoofdverdeler zelf
als het inderdaad een brakke trafo is aan liander zijde dan hadden de gensets het wel overgenomen daar het net wegvalt
en mocht het inderdaad het worst case scenario zijn wat jij schetst, dan ben ik bang dat het nog wel even gaat duren
aangezien de b feed wel functioneert, athans dat idee krijg ik uit de berichten, lijkt me eerder een ups dan de hoofdverdeler zelf
B werkte ook pas na een uur of 2 (zover ik begrepen heb heeft die er ook uit gelegen).
Je genset voed toch niet direct de UPS. Het lijkt mij logischer dat UPS, genset en hoofd aansluiten alle 3 apart aangesloten zitten op de HKL. Anders moet je weer aparte verbindingen gaan leggen om vanaf je hoofdnet de UPS op te laden en zou je nooit je generator kunnen draaien zonder je UPS. Daarbij komt ook nog, als het alleen hoofdnet + UPS was geweest dan had je binnen 5 minuten wel weer power gehad, want dan had alleen de genset op hoeven te starten.
Maar, zoals ik eerder al aangaf...
Veel meer dan speculeren kunnen we niet doen, aangezien EN wel erg summier is in de aangeleverde info. Nadat de storing verholpen is zal je nog wel een verklaring krijgen, maar meestal is die voor jip en janneke geschreven en weet je nog niet wat de root cause is geweest...
tomadmiraal
01/10/13, 17:41
Ik hang zelf in Suite 2A en heb de hele dag stroom op de B-feed. De A-feed is inderdaad al de hele dag down.
Het is natuurlijk volledig afhankelijk van hoe redundant je je netwerk hebt ingericht, maar wij zijn in ieder geval de hele dag gewoon in de lucht geweest.
Ik heb overigens gelezen dat er ook ruimtes zijn waar zowel de A als de B feed zijn uitgevallen.
dennis0162
01/10/13, 17:43
Ik hang zelf in Suite 2A en heb de hele dag stroom op de B-feed. De A-feed is inderdaad al de hele dag down.
Het is natuurlijk volledig afhankelijk van hoe redundant je je netwerk hebt ingericht, maar wij zijn in ieder geval de hele dag gewoon in de lucht geweest.
Ik heb overigens gelezen dat er ook ruimtes zijn waar zowel de A als de B feed zijn uitgevallen.
Dan heb je geluk, als bij jou ook de A en B waren uitgevallen dan was je ook down.
Of je moet zelf een flinke UPS hebben staan.
Dat ligt dus maar deels aan hoe goed je je netwerk in hebt gericht.
dcopruiming
01/10/13, 17:48
Dan heb je geluk, als bij jou ook de A en B waren uitgevallen dan was je ook down.
Of je moet zelf een flinke UPS hebben staan.
Dat ligt dus maar deels aan hoe goed je je netwerk in hebt gericht.
dat werkt ook niet altijd, jij kan wel een UPS in je rackje hangen maar als je uplinks in hetzelfde DC zitten (dus geen dark fiber) en hun aggregation switches hebben geen ups, dan ben je alsnog het zaadje
dcopruiming
01/10/13, 18:00
Je genset voed toch niet direct de UPS. Het lijkt mij logischer dat UPS, genset en hoofd aansluiten alle 3 apart aangesloten zitten op de HKL. Anders moet je weer aparte verbindingen gaan leggen om vanaf je hoofdnet de UPS op te laden en zou je nooit je generator kunnen draaien zonder je UPS. Daarbij komt ook nog, als het alleen hoofdnet + UPS was geweest dan had je binnen 5 minuten wel weer power gehad, want dan had alleen de genset op hoeven te starten.
Volgens mij zitten we op 1 lijn, ik zei "hangen de upsen achter 1 hoofdverdeler gevoed door gensets en net."
Ik kan me echter niet voorstellen dat er geen bypass in de HFK zit waarmee je alsnog op de genset kan schakelen, lijkt me een vereiste.
Het probleem is in ieder geval dusdanig dat er wel serieus iets mis is, ik hoop voor de betrokkenen dat er snel een oplossing komt
Nadat de storing verholpen is zal je nog wel een verklaring krijgen, maar meestal is die voor jip en janneke geschreven en weet je nog niet wat de root cause is geweest...
Klopt, ik zie zelden een RFO waar je ook echt iets mee kan
Het is natuurlijk wel bekend, maar er loopt altijd wel een marketing director rond die bang is voor de publiciteit of de SLA's die hij moet gaan uitkeren als duidelijk wordt wat er nou echt mis was.
tomadmiraal
01/10/13, 18:04
Dan heb je geluk, als bij jou ook de A en B waren uitgevallen dan was je ook down.
Of je moet zelf een flinke UPS hebben staan.
Dat ligt dus maar deels aan hoe goed je je netwerk in hebt gericht.
Daar heb je helemaal gelijk in. Sommige dingen heb je niet in de hand.
MediaDeskundig
01/10/13, 18:21
En we zijn weer online, geen verlies van data enz.
Nou... Volgens mij is er iets kapot gegaan bij FXW. M'n mailserver hangt daar toevallig en die geeft nog geen teken van leven. Sowieso doet de core-router van fxw rare dingen bij een traceroute.
Volgens Leaseweb is hun suite 2A volledig terug maar suite 1D nog niet, ook melden ze dat er nog wat defecten aan zekeringen van Easynet zijn waar nog aan gewerkt word... dus 100% alles terug hoeft nog niet voor iedereen (zoals een FXW) zo te zijn.
Vandaar.. nog maar even wachten dan.
Leaseweb heeft ondertussen een tijdje alles weer up-and-running.
de commentaren bij webwereld zijn trouwens wederom briljant.
Mensen die lopen te roepen hoe belachelijk t is dat hun webshop, die gehost is bij een reseller van een provider (voor een duppie) al zo lang down was en hoeveel omzet ze wel niet mis hebben gelopen...if you pay monkey's...
T. Verhaeg
02/10/13, 08:13
if you pay monkey's...
Peanuts eigenlijk.. :lovewht:
Had toch naar bed moeten gaan :D
ErikKosters
02/10/13, 10:09
Stroomstoring..., de vorige kan ik mij nog herinneren @ Easynet. Jammer, maar succes aan de getroffenen.
dennis0162
02/10/13, 10:37
Offtopic:
Mevrouw op Tweakers heeft haar tampons nodig.
HarrietWegloop
02/10/13, 10:52
Offtopic:
Mevrouw op Tweakers heeft haar tampons nodig.
Te erg dit!! Slecht voor de rest van het vrouwelijke volk zo'n type😁
Voor de rest wens ik iedereen sterkte die getroffen is door de stroomstoring!
Offtopic:
Mevrouw op Tweakers heeft haar tampons nodig.
De reactie er onder is wel goed gevonden moet ik zeggen :p.
Ramon Fincken
02/10/13, 13:59
Weet iemand waar en wanneer leaseweb met een verklaring komt hoe dit kon gebeuren?
@ramon, je bedoelt Easynet neem ik aan?
Axel Polfliet
02/10/13, 17:47
@ramon, je bedoelt Easynet neem ik aan?
Leaseweb staat er, dus zij zullen ook wel met (een vorm van) verklaring komen.
systemdeveloper
02/10/13, 21:22
Toch geeft dit wel weer aan dat je ''worst nightmare'' gewoon wel kan gebeuren, hoeveel je er ook redelijkerwijze aan redundatie tegenaan gooit.
Ramon Fincken
02/10/13, 22:49
Easynet bedoelde ik , my bad.
En ja .. dit heb ik tot op heden nog nooit meegemaakt.
De grap is dat mijn getroffen servers bij FXW staan, en ze een failover aanbieden. Ik vandaag gevraagd of dat downtime in dit specifieke geval had voorkomen en of het master-master setup is met meerdere DC's. .. antwoord: nee
Kay van Aarssen
02/10/13, 23:35
Tuurlijk had het voorkomen kunnen worden als je een master master setup had over meerdere datacenters...
cyberbootje
03/10/13, 00:33
Tuurlijk had het voorkomen kunnen worden als je een master master setup had over meerdere datacenters...
Denk ik reageer maar tot nu toe niet maar even ter bevestiging, ja dat kan idd.
Wij hebben daar ook nog wat spul draaien, staat in HA failover met een ander DC, niets gemerkt los van wat gesneuvelde schijven. Hoe dan ook, dit is wel gewoon rampzalig en idd een nachtmerrie waar je maag gewoon van omdraait als je weet dat je verder geen kant op kan ;)
dcopruiming
03/10/13, 00:57
Toch geeft dit wel weer aan dat je ''worst nightmare'' gewoon wel kan gebeuren, hoeveel je er ook redelijkerwijze aan redundatie tegenaan gooit.
mwah daar ben ik het niet mee eens, redundantie houdt niet op bij een dubbele ups. het is ook nadenken over wat als scenarios, zoals bvb het inbouwen van bypassen op stragische plekken. Als dus blijkt dat er onderdelen in je kritische infra zitten welke niet binnen 7 uur vervangen kunnen worden dan is er toch wel iets goed mis hoor.
systemdeveloper
03/10/13, 01:48
mwah daar ben ik het niet mee eens, redundantie houdt niet op bij een dubbele ups. het is ook nadenken over wat als scenarios, zoals bvb het inbouwen van bypassen op stragische plekken. Als dus blijkt dat er onderdelen in je kritische infra zitten welke niet binnen 7 uur vervangen kunnen worden dan is er toch wel iets goed mis hoor.
Oh, daar ben ik het volledig mee eens hoor. Ik zette 'redelijkerwijze' ook tussen quotes aangezien je redundatie heel ver kunt doortrekken. En zo lang plat zijn is voor een dc eigenlijk een statistische onmogelijkheid. Zou je zeggen.
mwah daar ben ik het niet mee eens, redundantie houdt niet op bij een dubbele ups. het is ook nadenken over wat als scenarios, zoals bvb het inbouwen van bypassen op stragische plekken. Als dus blijkt dat er onderdelen in je kritische infra zitten welke niet binnen 7 uur vervangen kunnen worden dan is er toch wel iets goed mis hoor.Een eventueel "probleem" is natuurlijk ook dat EasyNet al heel wat keren van eigenaar gewisselt is en wellicht niet iedereen het zelfde beleid gevoerd heeft?
Verder kan je netwerkonderhoud makkelijk plegen, maar even de infra voor stroom vervangen kan niet, niet iedereen heeft A+B en dan is het lastig om even een feed uit te zetten.
Wellicht waren er dus mensen binnen EasyNet zich wel degelijk bewust van bepaalde risico's maar konden ze er niet op acteren omdat het zou betekenen dat de stroom er voor een bepaalde periode af zou moeten wat in een DC gewoon niet kan.
Een netwerk kan je voor 30 seconde best wel uit zetten, maar even 30 seconde de stroom er af kost uren recovery, nog maar te zwijgen over de communicatie die je van te voren met je klanten moet voeren om dit allemaal af te stemmen.
Je kunt nooit alle situaties afvangen en wellicht was het gewoon een kwestie van pech / samenloop van omstandigheden...
Maar wat ik dan niet snap is dat er tijdens of na een storing altijd een chronisch gebrek aan communicatie is. Zeg gewoon wat er aan de hand is, of wat je denk dat er aan de hand is geweest, dan gaat men niet speculeren en krijg je geen indianen verhalen.
Het zal mij niks verbazen als er nooit een duidelijk antwoord komt op de vraag hoe dit heeft kunnen gebeuren. Kijk maar naar de storing bij Gyro van een tijdje terug, daar weet ook (bijna) niemand hoe dat nou heeft kunnen gebeuren.
niet iedereen heeft A+B
Kijk dat snap ik nu niet. Wie neemt nu GEEN A+B powerfeeds? Of, wie neemt er geen A+B powerfeeds maar komt dan janken dat hij geen redundante power feeds heeft?
Het zal mij niks verbazen als er nooit een duidelijk antwoord komt op de vraag hoe dit heeft kunnen gebeuren. Kijk maar naar de storing bij Gyro van een tijdje terug, daar weet ook (bijna) niemand hoe dat nou heeft kunnen gebeuren.
Ik neem aan dat je de storing bij PCextreme bedoeld, klopt dat? Mogelijk dat Wido daar iets over kan zeggen/kan regelen dat er meer informatie richting klanten wordt gestuurd.
Verder heeft Easynet in de afgelopen 5 (?) jaar eerder te maken gehad met enkele serieuze stroom/koel storingen als ik me niet vergis.
Ik begreep van Leaseweb dat in delen van EasyNet zowel de A- als de B-feed eruit lagen, dus zelfs met dubbele voeding lag het plat.
Kijk dat snap ik nu niet. Wie neemt nu GEEN A+B powerfeeds? Of, wie neemt er geen A+B powerfeeds maar komt dan janken dat hij geen redundante power feeds heeft?
Jouw business model is niet iedereens business model. Er zijn zat mensen die zonder A+B powerfeed kunnen. Je hoeft je redundantie niet op rackbnivo te regelen, je kan dit ook DC nivo doen. Er word meer gedaan als alleen Webhosting in DC's :).
Kijk dat snap ik nu niet. Wie neemt nu GEEN A+B powerfeeds? Of, wie neemt er geen A+B powerfeeds maar komt dan janken dat hij geen redundante power feeds heeft?
Er zijn best een hoop (access) switches die geen dubbele voeding hebben. Of alleen een (DC) aansluiting voor een aparte (dure) extra voeding.
Ja, dan kun je met een ATS gaan werken, of de switch redundant maken en tweede switch op B-feed etc, maar goed, ik kan me prima voorstellen dat een datacenter veel moeite zal hebben om maintenance aan de stroomvoorziening te plannen.
En gegeven wat een datacenter pretendeert, mogen klanten best klagen als één feed uitvalt.
(mensen die janken als een heel DC uitvalt hadden ook maar gewoon redundant in een ander DC moeten staan enzo )
Ik was tijdens de storing een halve dag in EasyNet, inderdaad, wat een slechte communicatie! Ik kon zelfs zo naar binnen lopen zonder mij te hoeven legitimeren (!).
Waarom het allemaal zolang heeft geduurd komt grofweg door samenloop van omstandigheden en heel veel pech. De generatoren zijn namelijk gewoon opgestart nadat de stroom wegviel, echter kon de generator zijn opgewekte stroom niet kwijt. Na uren zoeken, bleek achteraf dat een schakelaar defect was, deze mocht en kon niet vervangen worden door iedere elektricien maar moest een expert op locatie komen.
Om te achterhalen in welke suite de schakelaar defect was, zijn ze per ruimte gaan schakelen.
Ik denk dat ze binnen enkele dagen wel met een RFO komen.
systemdeveloper
05/10/13, 18:25
En stel nu dat het Zombie Control Center in dat DC stond?
Voor switches en firewalls met maar 1 voeding, zijn er toch STS/ATSen? Ja, die kosten een paar 100 euro, maar die gebruik je toch?!!
dennis0162
06/10/13, 13:01
Daar heb je weinig aan als je A en B feed eruit ligt :)
Voor switches en firewalls met maar 1 voeding, zijn er toch STS/ATSen? Ja, die kosten een paar 100 euro, maar die gebruik je toch?!!
En daarmee vervang je een SPOF door een ander SPOF ;), je STS/ATS kan net zo goed kapot gaan of niet werken tijdens een power failure. En dan je nog zeggen van de zetten we zelf een UPS na de STS in het rack etc, maar is dat nu niet juist de taak van het datacenter om er voor te zorgen dat dit niet kan gebeuren zelfs al heb je maar 1 feed.
En daarmee vervang je een SPOF door een ander SPOF ;), je STS/ATS kan net zo goed kapot gaan of niet werken tijdens een power failure. En dan je nog zeggen van de zetten we zelf een UPS na de STS in het rack etc, maar is dat nu niet juist de taak van het datacenter om er voor te zorgen dat dit niet kan gebeuren zelfs al heb je maar 1 feed.
Nee, een datacenter heeft geen enkele verplichting dan wat er in je contract/overeenkomst staat. Het komt inderdaad voor dat een ATS soms ook gewoon zijn werk niet doet, laatst een hele batch gehad die terug moest naar de fabrikant.
Nee, een datacenter heeft geen enkele verplichting dan wat er in je contract/overeenkomst staat.
Dat klopt helemaal, maar er zijn ook datacenters die 100% uptime garanderen op stroom ongeacht of dit 1 of meerdere feeds is, dus waarom zou je dan bvb zelf nog zaken als sts/ats etc moeten gebruiken. Ik wilde ook alleen maar even aantonen dat een SPOF door een ander SPOF vervangen niet zo verstandig is, dan is de optie van visser om redundante switchen te gebruiken logischer.
dcopruiming
07/10/13, 01:24
dat snap ik dus niet, als uptime dusdanig belangrijk is, geef een peer honderd euro meer uit en koop een server met 2 voedingen. heb je geen ats nodig en is je voeding ook geen spof, twee vliegen in 1 klap
dat snap ik dus niet, als uptime dusdanig belangrijk is, geef een peer honderd euro meer uit en koop een server met 2 voedingen. heb je geen ats nodig en is je voeding ook geen spof, twee vliegen in 1 klap
En je switch? Ook met een dubbele voeding? Of de switch dubbel uitvoeren? Bij dubbele switch betekend het dat je dubbele verbindingen hebt lopen naar switch 1 en switch 2 en dit moet je dan op OS laag ook nog eens correct configureren. Zo simpel is het allemaal niet.
- - - Updated - - -
Dat klopt helemaal, maar er zijn ook datacenters die 100% uptime garanderen op stroom ongeacht of dit 1 of meerdere feeds is, dus waarom zou je dan bvb zelf nog zaken als sts/ats etc moeten gebruiken. Ik wilde ook alleen maar even aantonen dat een SPOF door een ander SPOF vervangen niet zo verstandig is, dan is de optie van visser om redundante switchen te gebruiken logischer.
Vraag me af welke datacenters dit zijn en wat voor afspraken er zijn gemaakt wanneer de 100% niet wordt gehaald. Garanderen is leuk, maar het moet ook behaald worden.
dcopruiming
07/10/13, 02:52
En je switch? Ook met een dubbele voeding? Of de switch dubbel uitvoeren? Bij dubbele switch betekend het dat je dubbele verbindingen hebt lopen naar switch 1 en switch 2 en dit moet je dan op OS laag ook nog eens correct configureren. Zo simpel is het allemaal niet.
2 switches? Dat lijkt me het geld niet, je hebt een nieuwe Juniper EX2200 voor 500 euro
Daarnaast, je krijgt toch ook dubbele uplinks van je provider?
2 switches? Dat lijkt me het geld niet, je hebt een nieuwe Juniper EX2200 voor 500 euro
Daarnaast, je krijgt toch ook dubbele uplinks van je provider?
Een EX2200 met 1 voeding...... je begrijp het niet he
dcopruiming
07/10/13, 03:53
Een EX2200 met 1 voeding...... je begrijp het niet he
nou ik heb liever 2 switches met 1 voeding dan 1 switch met 2 voedingen hoor :2 cents:
het ligt er maar net aan tot hoe ver je wil gaan; je zal zelf de berekening moeten maken of een 2e switch opweegt tegen de kosten van downtime
nou ik heb liever 2 switches met 1 voeding dan 1 switch met 2 voedingen hoor :2 cents:
het ligt er maar net aan tot hoe ver je wil gaan; je zal zelf de berekening moeten maken of een 2e switch opweegt tegen de kosten van downtime
Hier kan ik me enkel bij aansluiten, enkel dan meer in het algemeen dat ik belangrijke componenten liever dubbel uitgevoerd heb. Vaak kun je dan aan 1 van de 2 onderhoud uitvoeren terwijl de andere de taak overneemt. Dit beperkt de gevolgen van onderhoud, onderhoud met downtime bij switches is gewoon zeer irritant en kan nare gevolgen hebben. Hier ben ik in ieder geval bezig om in de toekomst alles via 2 switches te laten lopen (bij colocatie klanten enkel onder voorwaarden).
Ik snap trouwens niet waarom er nog zoveel ToR switches gemaakt worden met 1 voeding, of met zo'n moeilijke DC voeding, het lijkt mij dat er genoeg vraag uit de markt is voor dubbele voedingen.
mgielissen
07/10/13, 12:28
Je kunt ook een PDU gebruiken met 2 powerfeeds.
Je kunt ook een PDU gebruiken met 2 powerfeeds.
Maar ook je PDU kan weer kapot gaan.
dennis0162
07/10/13, 12:42
Laten we het er maar ophouden dat alles kapot kan.
Prima, ik begrijp best dat A vervangen wordt door B(onafhankelijk) maar als easynet een uitgebreide uitleg gaf konden we voor alternatieven denken die dan de toekomstige forum bezoekers uit konden helpen. Niemand heeft er iets aan als we alleen krijgen te horen "A en B down".
Cheers
Dit komt omdat in vrijwel alle gevallen (datacenters) de A- en B-Feed van de zelfde 10KV-ring afkomstig zijn.
Als ze al van twee gescheiden 10KV-ringen komen dan komen beide 10KV-ringen vanaf het zelfde 150KV station.
A- en B-Feeds zijn in Nederland over het algemeen een 'wassen neus' en staan leuk op papier, maar zeggen qua betrouwbaarheid en beschikbaarheid niets...
Dit komt omdat in vrijwel alle gevallen (datacenters) de A- en B-Feed van de zelfde 10KV-ring afkomstig zijn.
Als ze al van twee gescheiden 10KV-ringen komen dan komen beide 10KV-ringen vanaf het zelfde 150KV station.
A- en B-Feeds zijn in Nederland over het algemeen een 'wassen neus' en staan leuk op papier, maar zeggen qua betrouwbaarheid en beschikbaarheid niets...
Waarom is dat een wassen neus? Volgens mij komen er vaker kabelbreuken voor dan dat er 150KV trafo's stuk gaan. Je kan dan wel op 'dezelfde' ring zitten maar als je ene feed van 'links' komt en je ander van 'rechts' heb je nog altijd betrekkelijk meer redundancy als dat je 1 aansluiting hebt.
systemdeveloper
07/10/13, 14:27
Als je hier een true a+b feed wilt, kun je je DC op de grens gaan bouwen. (Ken trouwens iemand die dat doet, juist om van 2 verschillende leveranciers stroom te hebben). A+B als je maar 1 leveranciers hebt, blijft gewoon een beetje balen (beetje maar, want zo vaak komt een dc ook niet zonder stroom te staan)
A- en B-Feeds zijn in Nederland over het algemeen een 'wassen neus' en staan leuk op papier, maar zeggen qua betrouwbaarheid en beschikbaarheid niets...
Niet mee eens. Als jouw A- en B-feed op fysiek gescheiden UPS sets draaien, en eventueel ook eigen generatoren hebben, dan heeft dat zeker meerwaarde. De primaire stroombron kan dan weliswaar hetzelfde zijn, maar als je noodstroomvoorziening gescheiden zijn, biedt dat zeker een hogere mate van betrouwbaarheid.
(Ken trouwens iemand die dat doet, juist om van 2 verschillende leveranciers stroom te hebben)
Welk datacenter is dat? Er ging een tijdje terug een verhaal rond over een datacenter op de Nederlands/Duitse grens om tier-4 te kunnen draaien, maar dat bleek een fabeltje. Als er toch een datacenter is wat dit momenteel doet, ben ik benieuwd om wie het gaat.
systemdeveloper
07/10/13, 15:12
Welk datacenter is dat? Er ging een tijdje terug een verhaal rond over een datacenter op de Nederlands/Duitse grens om tier-4 te kunnen draaien, maar dat bleek een fabeltje. Als er toch een datacenter is wat dit momenteel doet, ben ik benieuwd om wie het gaat.
Weet niet welke je gehoord hebt maar ik heb de bouwtekeningen toch al voor mijn neus gehad en dat is inderdaad van hier op de nl/de grens. Maar ik denk dat daar nog wel wat tijd over heen gaat :(
... Omdat je niet afhankelijk wilt zijn van 1 10KV station waar wel eens wat mis kan gaan.
Nu komt dat maar zelden voor, maar toch.
Ook bij een kabelbreuk moet soms (voor herstel) ook de hele ring even plat.
Als je vanaf 2 10KV ringen een toevoer hebt die ook ieder vanaf een aparte 150-Feed komen, dan sluit je net weer wat extra uit (storing in een 10KV OF 150KV station).
Het hebben van twee verschillende leveranciers/netwerken is iets dat met name in de US van toepassing (en zinvol) is. Ons energienetwerk is dermate robuust (en deels een mesh-) dat ongeacht de uitval van 1 centrale, of meerdere 'import-lijnen' het gehele netwerk voorzien blijft. Dan kan men vervolgens ook nog eens delen afschakelen of bep. grote afnemers zoals de Hoogovens even 'down-scalen' zetten.
Je hebt in Nederland minder kans op uitval met slechts 1 leverancier, dan dat je ook daadwerkelijk zou voldoen aan de Tier-IV klasse op dat punt. Daarom blijf ik erbij dat de Tier-Classificatie op te veel punten niet van toepassing is op de Nederlandse situatie. Het geeft een vertekend beeld.
... Omdat je niet afhankelijk wilt zijn van 1 10KV station waar wel eens wat mis kan gaan.
Nu komt dat maar zelden voor, maar toch.
Ook bij een kabelbreuk moet soms (voor herstel) ook de hele ring even plat.
Als je vanaf 2 10KV ringen een toevoer hebt die ook ieder vanaf een aparte 150-Feed komen, dan sluit je net weer wat extra uit (storing in een 10KV OF 150KV station).
So ? Dat is toch precies waar de diesel backup (al) voor is, het uitvallen van de externe stroomtoevoer ?
Het hebben van twee verschillende leveranciers/netwerken is iets dat met name in de US van toepassing (en zinvol) is. Ons energienetwerk is dermate robuust (en deels een mesh-) dat ongeacht de uitval van 1 centrale, of meerdere 'import-lijnen' het gehele netwerk voorzien blijft. Dan kan men vervolgens ook nog eens delen afschakelen of bep. grote afnemers zoals de Hoogovens even 'down-scalen' zetten.
Je hebt in Nederland minder kans op uitval met slechts 1 leverancier, dan dat je ook daadwerkelijk zou voldoen aan de Tier-IV klasse op dat punt. Daarom blijf ik erbij dat de Tier-Classificatie op te veel punten niet van toepassing is op de Nederlandse situatie. Het geeft een vertekend beeld.
Dat zeker. Qua basis infrastructuur is de VS op een hoop manieren gewoon een tweede wereldland.
M.i. moet je redundantie toevoegen in volgorde van foutkans, en als je toekomt aan de kans op het uitvallen van de externe stroom van een DC begint het toch wel tijd te worden om vooral naar een ander DC te kijken, dan nog meer dingen bij/in/rondom dat enkele DC optuigen.
Het lijkt er tot nu toe aardig op dat wat er mis ging bij Easynet meer met interne distributie (en misschien procedure/aanpak) te maken had dan met iets wat met nog een aparte 10KV lijn voorkomen was.
Het is niet zo heel vaak dat een storing een mooi nette oorzaak heeft in een SPOF die simpel redundant had kunnen zijn.
Na de 'inkoppertjes' (disken in raid/mirror , dubbele server voeding) moet je al hard gaan denken wat daarna het grootste risico is, en hoe je dat risico kunt verkleinen zonder andere risico's (operator error, os/sw bugs, ...) erg te vergroten, vooral als het om componenten gaat die niet al te simpel als component redundant gemaakt kunnen worden (alles met state, databases e.d.).
Ramon Fincken
10/10/13, 12:00
Iemand al een reactie van Easynet gehad?
Iemand al een reactie van Easynet gehad?
Ik geloof dat iemand van EasyNet een statement had gemaakt op ispam...
In ons Data Center te Schipholrijk heeft zich een (gedeeltelijke) stroomstoring voorgedaan om 10:33AM. Dit is een geïsoleerd en ongewoon voorval, welke we volledig onderzoeken. Dit was een gedeeltelijke uitval en niet alle Easynet klanten in het data center werden getroffen, echter sommige hebben een tijdelijke onderbreking van hun diensten ervaren. We zijn ons terdege bewust van de impact die dit incident heeft op onze klanten en op hun beurt op de klanten van onze klanten.
Easynet heeft een goed track record in het leveren van robuuste en betrouwbare connectiviteit en data center services vanaf deze locatie, en kan bevestigen dat onze standaard escalatie, crisis management en leverancier escalatie processen onmiddellijk in werking traden toen het incident zich voordeed. We passen alle gangbare “best practices” toe bij het uitvoeren van regelmatige routine-onderhoud en het testen van de gehele faciliteit.
Ingenieurs van Easynet, samen met de ingenieurs van onze leveranciers, waren aanwezig op de faciliteit zoals het standaard proces voorschrijft en hebben het probleem geïsoleerd. Sinds vanmiddag werden diensten op een gecontroleerde manier weer actief en dit werd bevestigd door de getroffen klanten. Alle partijen (Easynet ingenieurs leveranciers ingenieurs) zijn aan de slag om zo snel mogelijk de service volledig te herstellen. Hoewel veel diensten reeds actief zijn kunnen we niet aangegeven wanneer de resterende diensten volledig hersteld zullen zijn, gezien het feit dat wij voorzichtig te werk moeten gaan in een “live”-omgeving.
Volledige analyse naar de oorzaak van het probleem zal worden verstrekt aan de getroffen klanten volgens onze normale proces, alsmede gegevens over eventuele corrigerende maatregelen die moeten worden uitgevoerd om het incident dat vandaag is ontstaan naar de toekomst toe uit te sluiten.
Easynet biedt zijn excuses voor het ongemak dat dit aan onze klanten en hun klanten heeft veroorzaakt en danken hen voor hun geduld tijdens de periode dat deze situatie wordt/is rechtgezet.
Cathy van de Garde, Easynet
Ramon Fincken
10/10/13, 16:29
Gevonden, thanks