PDA

Bekijk Volledige Versie : Grafix Capelle aan den Ijssel - Stroom- en netwerkstoring



Technotop
13/06/10, 20:34
Op dit moment is alles onbereikbaar in het datacentrum Grafix NOC in Capelle aan den IJssel.. oorzaak en wat er precies is uitgevallen nog onbekend.

Lampje
13/06/10, 20:34
Idd, erg vervelend. Heb er ook last van..

Rev00
13/06/10, 20:35
ook hier down , voor mij in de 217.67.229.x reeks.

Freezer
13/06/10, 20:36
Ik ging al bijna bellen, maar ik zie dat het al bekend is.

dennis0162
13/06/10, 20:38
Netwerk storing van grafix.

Rev00
13/06/10, 20:38
Yep;

5 rtr1.ams-ix.ams-tc2.grafix.nl (195.69.144.239) 6.303 ms !N * *

Was al bang voor een stroomstoring, die 520 dagen uptime stond zo leuk ;)
Volgens mij nu gewoon netwerk storing dus?

deeltje
13/06/10, 20:39
Is et alleen Capelle en weet iemand al of et een algehele stroomstoring of iets anders is?

Desmond
13/06/10, 20:40
Ik ben net mobiel gebeld door Emile van Grafix, hoofd netwerkrouter is offline (geen stroom storing dus), ze doen er alles aan om alles weer z.s.m. up te krijgen...

Desmond

Technotop
13/06/10, 20:40
Geen stroomstoring.

De gehele ring naar Capelle lijkt er uit te liggen (zowel links als rechtsom). Engineers zijn hier reeds mee bezig en hopen alles zo snel mogelijk online te hebben.

Freezer
13/06/10, 20:41
Maar dat zou dus een single point of failure aanduiden? Ik dacht dat het redundant was opgezet?

Ruffneck
13/06/10, 20:42
19:41:25 up 27 min, 1 user, load average: 0.02, 0.07, 0.08

Lijkt toch verdacht veel op een stroomprobleempje niet?

Desmond
13/06/10, 20:43
Alles ligt er nu nog uit, althans bij onze racks.

Jurian
13/06/10, 20:49
Ugh, wij staan in Alphen maar schijnbaar gaan onze IP's ook over Capelle... zucht :(

dennis0162
13/06/10, 20:50
router in tc2 is down.

Desmond
13/06/10, 20:51
Time-out bij opdracht.
Time-out bij opdracht.
Time-out bij opdracht.
Time-out bij opdracht.
Time-out bij opdracht.
Time-out bij opdracht.
Time-out bij opdracht.
Time-out bij opdracht.
Time-out bij opdracht.
Time-out bij opdracht.
Antwoord van 217.67.247.5: Het doelnetwerk is niet bereikbaar.
Time-out bij opdracht.
Time-out bij opdracht.
Time-out bij opdracht.
Time-out bij opdracht.
Time-out bij opdracht.
Time-out bij opdracht.
Time-out bij opdracht.

BeneluxGaming
13/06/10, 20:53
Er zouden 2 routers in de fout zijn gegaan, ze zijn er mee bezig op dit moment!

BDigitinternetdiensten
13/06/10, 20:54
Jaa tis kut zo, ben je redundant aangesloten over beide lijnen. Gaan ze alle twee tegelijk:(

IvoSmits
13/06/10, 20:55
19:41:25 up 27 min, 1 user, load average: 0.02, 0.07, 0.08

Lijkt toch verdacht veel op een stroomprobleempje niet?

Zelfde hier. Server (ondergebracht bij Redunix) is inmiddels terug online, maar is wel om de een of andere reden gereboot. Niet zo netjes...

VinceSTM
13/06/10, 20:57
Zelfde hier. Server (ondergebracht bij Redunix) is inmiddels terug online, maar is wel om de een of andere reden gereboot. Niet zo netjes...

3 minuten power outage gehad hier.

Desmond
13/06/10, 20:58
Hier ligt nog alles er uit helaas... wel fijn te zien dat anderen weer online zijn in Capelle dan kan het nooit lang meer duren...

t.bloo
13/06/10, 21:00
Hier ook een minuut of vijf geen power gehad. Edit: eerder 10 dan 5 minuten geen power geweest.

ShineOn
13/06/10, 21:01
Ons rack is nog down.. zullen ze alles een voor een opschakelen?

VinceSTM
13/06/10, 21:01
volgens grafix via w3media is er geen stroomstoring :S

chriske
13/06/10, 21:01
Ons (redunix) is gemeld dat het geen stroomstoring is maar een router die down is.

Desmond
13/06/10, 21:01
Ja inderdaad, zou puur om netwerk gaan, hier nog alles down, ik verwacht dat ze range voor range up brengen...

VinceSTM
13/06/10, 21:03
Ja inderdaad, zou puur om netwerk gaan, hier nog alles down, ik verwacht dat ze range voor range up brengen...

Dat is dus pertinent niet waar!

Desmond
13/06/10, 21:05
Ik heb nog geen idee, hou mijn ping venstertje open :)

Moc
13/06/10, 21:06
Zijn ze nu bezig met het online brengen per range?

ShineOn
13/06/10, 21:06
De gene die weer online zijn, staan die boven of beneden?

deeltje
13/06/10, 21:06
Ik ben volledig terug up:

System Uptime 0 Days, 0 Hours and 51 Minutes

Lijkt me toch wel degelijk een stroomstoring

BeneluxGaming
13/06/10, 21:07
Wij staan in ieder geval boven, geen van onze ranges nog up...

Desmond
13/06/10, 21:08
Wij hebben zowel boven als beneden racks, beiden nog offline

VvS
13/06/10, 21:09
Hier komt de boel weer online.

Moc
13/06/10, 21:09
Ik ben een stukje verder:


5 9 ms 9 ms 12 ms rtr1.ams-ix.AMS-tc2.grafix.nl [195.69.144.239]
6 11 ms 10 ms 10 ms csw-0.cpl-mkb.grafix.nl [217.67.247.10]
7 * * * Time-out bij opdracht.
8 *

chriske
13/06/10, 21:10
nog niet veel verandering hier, boven en beneden.

McG_NL
13/06/10, 21:14
Power dus !!

PARADIJSSELPARK 2904PA CAPELLE AAN DEN IJSSEL 13-06-2010 17:43 < 10 Nog niet bekend Spontane storing

Bron: http://www.stedin.net/Storingen/Pages/Storing_elektriciteit.aspx

Desmond
13/06/10, 21:15
Dat zou wel heel apart zijn... UPSsen, Diesel ?

Storing: 13-06-2010 17:43

Wij gingen pas om 19.40 offline

VinceSTM
13/06/10, 21:15
Power dus !!

PARADIJSSELPARK 2904PA CAPELLE AAN DEN IJSSEL 13-06-2010 17:43 < 10 Nog niet bekend Spontane storing

Bron: http://www.stedin.net/Storingen/Pages/Storing_elektriciteit.aspx

Ook geheel verkeerde adres ;) En 2 uur later.

ShineOn
13/06/10, 21:16
ik wil net zeggen.... staat genoeg backup daar....

dennis0162
13/06/10, 21:18
Ons rack is ook de stroom af geweest.

McG_NL
13/06/10, 21:19
Ja is inderdaad een iets ander adres.

Maar goed, de power is wel van de servers af geweest.

chriske
13/06/10, 21:24
duurt wel lang ofniet

Desmond
13/06/10, 21:25
Emile net weer gesproken, ondanks de UPSsen en diesel is van alle apparatuur de stroom af geweest. Uplink 1 is weer up, uplink 2 is nog down. Ik spring zo maar in de auto om te checken of alles goed is opgestart gezien er een flinke berg servers offline gegaan is.

ShineOn
13/06/10, 21:27
tja, dat ga ik denk ook maar even doen ;)

Piwi-Web
13/06/10, 21:28
Wordt het nog gezellig daar :)

Desmond
13/06/10, 21:30
Ja altijd leuk staan 2 monitor karretjes beneden zal drukke boel worden :)

hostingpower
13/06/10, 21:33
still not up :(

FlexZa
13/06/10, 21:33
Is inderdaad een stroomstoring geweest...

Hier 10 mins down geweest...al weer up sinds 19:50

zo blijft het toch beperkt dan...(iig voor mij :sorcerer:)

Lampje
13/06/10, 21:34
Bij ons draait t ook weer, ook uptime op 0.

Wie neemt er chips mee? :lovewht:

BeneluxGaming
13/06/10, 21:37
Ik ga nu ook onderweg! (moet maar weer... )

Piwi-Web
13/06/10, 21:40
Ja altijd leuk staan 2 monitor karretjes beneden zal drukke boel worden :)

Je eigen meenemen? :sorcerer:

Succes iig!

VinceSTM
13/06/10, 21:42
wat ik tot dusver gehoord / begrepen heb: faseverschil tussen 2 fases. Waarschijnlijk gevolg: ups in bypass en plof

24x7group
13/06/10, 21:42
Leuk zo op een zondagavond... not :)
Sterkte allemaal, hopelijk zijn er geen hardware problemen opgedoken met deze stroomstoring.

Jurian
13/06/10, 21:44
Ons spul in Alphen is deels weer bereikbaar; transit naar 't buitenland (in ieder geval Telia) doet nog niets, maar er wordt aan gewerkt. In Alphen zo te zien niets down geweest wat stroom betreft.

VinceSTM
13/06/10, 21:45
Leuk zo op een zondagavond... not :)
Sterkte allemaal, hopelijk zijn er geen hardware problemen opgedoken met deze stroomstoring.

1 degraded raid

rensariens
13/06/10, 21:48
Ons spul in Alphen is deels weer bereikbaar; transit naar 't buitenland (in ieder geval Telia) doet nog niets, maar er wordt aan gewerkt. In Alphen zo te zien niets down geweest wat stroom betreft.

Heeft niks te maken met Alphen :)

edit: Onjuist jurian. Als je nog via capelle loopt dan had je dit al veel eerder moeten aankaarten. Zijn er zat in Grafix netwerk gewoon online in Alphen. Voorbeeld:

http://smokeping.addwebsolutions.nl/cgi-bin/smokeping.cgi?target=Netherlands.SoloGigabit

Jurian
13/06/10, 21:50
De stroomstoring niet nee, netwerk problemen wel degelijk :)

Jurian
13/06/10, 21:52
Onze range bleek dus inderdaad via Capelle te lopen; dat is inmiddels aangepast maar nog niet overal opgepakt.

FlexZa
13/06/10, 21:55
Onze range bleek dus inderdaad via Capelle te lopen; dat is inmiddels aangepast maar nog niet overal opgepakt.

Weer een rede om nie op hetzelfde netwerk als de eigenaar van het DC te gaan zitten... (just my 2 cents :X)

Technotop
13/06/10, 21:57
Heeft niks te maken met Alphen :)

edit: Onjuist jurian. Als je nog via capelle loopt dan had je dit al veel eerder moeten aankaarten. Zijn er zat in Grafix netwerk gewoon online in Alphen. Voorbeeld:

http://smokeping.addwebsolutions.nl/cgi-bin/smokeping.cgi?target=Netherlands.SoloGigabit

Inderdaad, niets aan de hand in Alphen. Wel hebben wij twee kleine ranges welke wel hinder ondervonden tijdens het wegvallen van onze POP in Capelle.. die moeten ook weer draaien.

Capelle voor ons nog steeds onbereikbaar..

ShineOn
13/06/10, 21:58
Gelukkig heb ik nog een karretje gevonden ;)

Rev00
13/06/10, 22:02
Hier nog steeds down, meer mensen die nog niet up zijn?

* heeft weinig behoefte om zondag avond naar capelle te moeten *

Desmond
13/06/10, 22:05
Ik ben nu in Capelle, hier is alles up ALLE servers zijn gestart en draaien weer ;)

deeltje
13/06/10, 22:06
Hier nog steeds down, meer mensen die nog niet up zijn?

* heeft weinig behoefte om zondag avond naar capelle te moeten *

Duitsland staat toch al met 2-0 voor, je kan dus gerust gaan hoor :)

ShineOn
13/06/10, 22:06
als ik voor iemand iets aan moet drukken hoor ik het wel!

Rev00
13/06/10, 22:07
als ik voor iemand iets aan moet drukken hoor ik het wel!

SR333 graag aanzetten :)

ShineOn
13/06/10, 22:13
en waar staat tie?

Yourwebhoster
13/06/10, 22:15
en waar staat tie?

Kan dit niet beter even per e-mail/telefoon:)?

Succes allen, eerste helft is zo afgelopen. Leve de radio zullen we maar zeggen?

FlexZa
13/06/10, 22:24
Kan dit niet beter even per e-mail/telefoon:)?

Succes allen, eerste helft is zo afgelopen. Leve de radio zullen we maar zeggen?

Daar hebben we de live-stream van de NOS voor :dots:

ShineOn
13/06/10, 22:33
Ik ben er nog 5 min je kan me ff bellen op 0642542426

Toon
13/06/10, 22:48
Ik ben blij dat ik toen een UPS op onze belangrijkste servers gezet heb, servers prima doorgedraaid, jammer dat het netwerk van grafix down was ;(

Rob77
13/06/10, 22:49
Hm, lees dit nu pas, van mijn bakje wat daar hangt (via Technotop) kan ik de gateway niet eens pingen :(

We gaan eens bellen . . .

WeServIT
13/06/10, 22:51
Ons spul in Alphen is deels weer bereikbaar; transit naar 't buitenland (in ieder geval Telia) doet nog niets, maar er wordt aan gewerkt. In Alphen zo te zien niets down geweest wat stroom betreft.

In Alphen totaal niks gemerkt, maarja wij draaien los van het GrafiX netwerk, dus heel gek is het niet.

Rev00
13/06/10, 22:58
Hm, lees dit nu pas, van mijn bakje wat daar hangt (via Technotop) kan ik de gateway niet eens pingen :(

We gaan eens bellen . . .

Net gesproken, en het verzoek hier even te posten dat de mailserver van @grafix.nl momenteel niet werkt / is gecrashed.

Graag mailen naar beheer@grafix-internet.nl !

Rob77
13/06/10, 23:19
Net gesproken, en het verzoek hier even te posten dat de mailserver van @grafix.nl momenteel niet werkt / is gecrashed.

Graag mailen naar beheer@grafix-internet.nl !

Ah dank je, gelijk maar gedaan.

Xidora
13/06/10, 23:28
Het is niet de eerste keer... (http://www.ispam.nl/?s=grafix+storing)

Grafix datacentrum Alphen aan de Rijn getroffen door stroomstoring
Randy ten Have op 5 januari 2010 08:04

Stroomstoring in GrafiX NOC Alphen aan de Rijn
Randy ten Have op 25 mei 2009 08:05

Wederom stroomstoring bij Grafix in Capelle aan den IJssel
Randy ten Have op 1 oktober 2008 08:08

Stroomstoring GrafiX Capelle aan den IJssel datacentrum
Arnout Veenman op 26 augustus 2008 08:10

Vierde stroomstoring dit jaar in het GrafiX datacentrum
Arnout Veenman op 6 december 2007 07:57

Derde stroomstoring dit jaar in het GrafiX datacentrum
Arnout Veenman op 28 augustus 2007 08:20

Opnieuw stroomstoring in het GrafiX datacentrum
Arnout Veenman op 4 juli 2007 10:05

Stroomstoring in het GrafiX datacentrum
Arnout Veenman op 14 maart 2007 18:40

Rob77
14/06/10, 00:31
Het is niet de eerste keer... (http://www.ispam.nl/?s=grafix+storing)

Grafix datacentrum Alphen aan de Rijn getroffen door stroomstoring
Randy ten Have op 5 januari 2010 08:04

Stroomstoring in GrafiX NOC Alphen aan de Rijn
Randy ten Have op 25 mei 2009 08:05

Wederom stroomstoring bij Grafix in Capelle aan den IJssel
Randy ten Have op 1 oktober 2008 08:08

Stroomstoring GrafiX Capelle aan den IJssel datacentrum
Arnout Veenman op 26 augustus 2008 08:10

Vierde stroomstoring dit jaar in het GrafiX datacentrum
Arnout Veenman op 6 december 2007 07:57

Derde stroomstoring dit jaar in het GrafiX datacentrum
Arnout Veenman op 28 augustus 2007 08:20

Opnieuw stroomstoring in het GrafiX datacentrum
Arnout Veenman op 4 juli 2007 10:05

Stroomstoring in het GrafiX datacentrum
Arnout Veenman op 14 maart 2007 18:40

Sja, de grap is, de bak die ik daar heb hangen is een uitwijk machine voor het geval de productie machine down gaat.

Tot heden is mijn primaire machine 0 x getroffen door een calamiteit, de backup echter . . .


Edit; mijn bak is iig weer terug . . .

Wynand
14/06/10, 02:00
Leuke eerste post Xidora... Verder nog een verschil tussen Alphen & Capelle, but agreed, gebeurt daar net wat te vaak.

t.bloo
14/06/10, 08:46
is er eigenlijk al bekend wat de oorzaak is?

postzegel
14/06/10, 09:14
De mail werkt jammer genoeg nog steeds niet bij mij. Klant van w3media.

D. ter Horst
14/06/10, 09:50
is er eigenlijk al bekend wat de oorzaak is?

Dit staat op hun NOC pagina:



Geachte relatie,

De storing van afgelopen avond is inderdaad het gevolg geweest van een stroomdip.

Omstreeks 18:49u sprong 1 van de UPS’en in storing. Tijdens het automatisch terugschakelen van deze UPS ontstond er omstreeks 19:10u een korte stroomdip waardoor er servers zijn uitgevallen.
Tijdens deze dip zijn tevens beide Cisco core-switches om nog onduidelijke reden uitgevallen en is de software vastgelopen. Hierdoor was een deel van ons IP-netwerk onbereikbaar.

De oorzaak van de storing aan de UPS is nog niet bekend. Indien 1 UPS uitvalt nemen de andere UPS’en de installatie automatisch over. Het terugschakelen van een UPS moet probleemloos en zonder onderbreking kunnen verlopen.

Maandag zal de gehele installatie worden doorgemeten door een gespecialiseerd bedrijf en zal de oorzaak achterhaald. De uitkomst hiervan en vervolgacties zullen hierna via deze mailinglijst kenbaar worden gemaakt.

Excuses voor de veroorzaakte overlast,

Met vriendelijke groet,
GrafiX Internet B.V

postzegel
14/06/10, 11:51
Mail werkt weer gelukkig.

Rev00
14/06/10, 12:24
hier ook weer aantal uurtjes up :)

phreak
14/06/10, 12:51
Je zou denken dat na zoveel jaar ellende toch wel een les geleerd was, klaarblijkelijk toch niet.. toch weer jammer voor mensen die daar hun kritieke apparatuur hebben staan (waaronder ik :))

Toon
14/06/10, 14:17
Ik snap het sowieso niet, heb geinvesteerd in STS switches, dubbele voedingen, A+B feed in gebruik, maar dan valt nog de hele bende uit? Weird.. je zou verwachten dat A+B feed in ieder geval 1 feed up blijft..

kjkoster
14/06/10, 14:56
Ik kan me niet aan de indruk onttrekken dat er veel meer aan de hand was dan een stroom storing. Ik had vrijdag allerlei vage netwerk problemen. Het netwerk leek zowiezo nogal brak, de laatste dagen. Mijn monitoring van het netwerk daar gaf nogal wat gemiste pings aan. Met ssh inloggen was supertraag en als ik vi zat kon ik bij vlagen lekker vooruit tikken zonder wat te zien.

Die problemen zijn nu ook weg. Daar ben ik wel blij mee natuurlijk, maar ik weet niet of ze opgelost zijn of alleen maar even weg.

Kees Jan

Apoc
14/06/10, 16:32
Ik snap het sowieso niet, heb geinvesteerd in STS switches, dubbele voedingen, A+B feed in gebruik, maar dan valt nog de hele bende uit? Weird.. je zou verwachten dat A+B feed in ieder geval 1 feed up blijft..

Het lijkt me sowieso vrij duidelijk dat dit geen gescheiden feeds betreft.

Bart L
14/06/10, 17:37
met alle respect, als je gaat inverstering in STS switchen e.d. ,dan is er toch ook voldoende budget om naar een andere DC uit te wijken?

Toon
14/06/10, 17:45
Tuurlijk is dat budget er vast wel, maar ik ga niet 'even' verhuizen.
Het betreft hier wel +/- 12 volle racks..

Swiftway-UK
14/06/10, 18:05
Tuurlijk is dat budget er vast wel, maar ik ga niet 'even' verhuizen.
Het betreft hier wel +/- 12 volle racks..

Als je PI space of een eigen netwerk hebt, dan valt verhuizen best nog mee. Maar er is altijd wat downtime natuurlijk.

Apoc
14/06/10, 18:37
Tuurlijk is dat budget er vast wel, maar ik ga niet 'even' verhuizen.
Het betreft hier wel +/- 12 volle racks..

Uiteraard is het niet "even" gedaan, maar ik zou toch eens de afweging maken of dat niet gewoon de moeite waard is (schade aan apparatuur, schade aan je reputatie, klanten de weglopen en/of wegblijven i.v.m. de locatie, en eigenlijk constant met de onzekerheid moeten leven of je apparatuur binnenkort niet weereens plat gaat).

En tuurlijk scheelt dit soort datacenter in de kosten, maar het lijkt me inmiddels toch wel vrij duidelijk dat je daarmee evenredig inlevert op de betrouwbaarheid. Als je het mij vraagt kun je dan toch beter voor betrouwbaarheid kiezen. Daarnaast laat je daarmee aan je klanten zien dat je dit soort omstandigheden zelf ook niet acceptabel vindt (doe je dat niet, dan raak je ze vroeg of laat kwijt).

Bekijk het eens vanuit het oogpunt van de aanbieder; er zijn problemen, maar men blijft toch wel klant. De een blijft klant omdat verhuizen te veel moeite is, de ander blijft klant omdat hogere kosten niet in hun businessmodel passen (omdat ze zelf ook schijtprijzen aanbieden aan hun klanten). Waarom zou je als datacenter dan in een (dure) permanente oplossing gaan investeren? De klanten blijven (schijnbaar) toch wel.

Overigens wil ik even benadrukken dat ik absoluut NIETS tegen Grafix heb. Zij bieden simpelweg aan waar vraag naar is; colocatie tegen baggerprijzen. Als je het mij vraagt ligt dit probleem dan ook vooral bij de afnemers en in veel mindere mate bij de aanbieder.


Als je PI space of een eigen netwerk hebt, dan valt verhuizen best nog mee. Maar er is altijd wat downtime natuurlijk.

Downtime kun je ook nog omheen door vanuit het oude netwerk een tijdelijk lijntje neer te leggen naar de nieuwe locatie (zodat daar ook de IPs beschikbaar zijn), en vervolgens de handel over het netwerk migreren. Het kost uiteraard aardig wat tijd en geld, maar dat mag ook - het is een investering in je toekomst.

Ik ben overigens nog wel benieuwd naar de definitieve uitleg van Grafix.

dicktump
14/06/10, 18:47
Downtime kun je ook nog omheen door vanuit het oude netwerk een tijdelijk lijntje neer te leggen naar de nieuwe locatie (zodat daar ook de IPs beschikbaar zijn), en vervolgens de handel over het netwerk migreren. Het kost uiteraard aardig wat tijd en geld, maar dat mag ook - het is een investering in je toekomst.

Of gewoon via een tunnel IP's beschikbaar maken. Dat is soms eenvoudiger dan even een lijn aanleggen.

Is niet een heel mooie oplossing misschien, maar voor tijdelijk kan dat op zich wel.

Apoc
14/06/10, 19:10
Of gewoon via een tunnel IP's beschikbaar maken. Dat is soms eenvoudiger dan even een lijn aanleggen.

Is niet een heel mooie oplossing misschien, maar voor tijdelijk kan dat op zich wel.

Met "lijn" bedoelde ik uiteraard niet een fysieke lijn. Een gigabit vlan is waarschijnlijk al genoeg.

ichosting
14/06/10, 19:24
Met "lijn" bedoelde ik uiteraard niet een fysieke lijn. Een gigabit vlan is waarschijnlijk al genoeg.

Voor het netwerk kan dat heel goed idd. Alleen dan zul je alsnog al die 12 racks moeten gaan verhuizen en dat levert weer kort downtime op. Ik denk dat Swiftway dat bedoeld.

dennis0162
14/06/10, 20:23
Gister druk bezig geweest met servers herstellen.

Tot gister +- 2 jaar geen stroomonderbreking gehad.

Vorig jaar Augustus is alles vervangen door gloed nieuw spul. (UPS'en, Diesel gen, Kabels). Alles is toen ook uitvoerig getest.

De A & B feed zijn volgens mij enkel bedoeld om hoge vermogens te leveren aan racks.

Piwi-Web
14/06/10, 21:38
De A & B feed zijn volgens mij enkel bedoeld om hoge vermogens te leveren aan racks.

Jep, niet redundant uitgevoerd in ieder geval ;)
STS heeft dus ook geen enkele zin ... Kan je beter investeren in eigen UPS'en (die niet in bypass slaan ... ) die het zo'n 5 tot 10 minuten uithouden (dan is meestal de generator wel handmatig opgestart)

Lite-On
15/06/10, 01:26
Jep, niet redundant uitgevoerd in ieder geval ;)
STS heeft dus ook geen enkele zin ... Kan je beter investeren in eigen UPS'en (die niet in bypass slaan ... ) die het zo'n 5 tot 10 minuten uithouden (dan is meestal de generator wel handmatig opgestart)

A + B feed hoeft helemaal niet te zorgen voor hogere vermogens per rack. Misschien bij de "budget" datacenters waar 32A wordt geleverd in de vorm van 2x 16A.

STS heeft geen enkele zin? Zal idd weinig zin hebben als de A + B feed niet op orde is. Wanneer de stroomvoorziening wel goed op orde is, en redundant is opgebouwd dan zul je zeker profijt hebben van een ATS/STS!
Ik heb zelf in Groningen ook STS switches in de racks hangen. Draait als een trein, echter is daar de stroomvoorziening ook heel wat beter opgebouwd dan menig datacenter ;-) In mijn geval zal de STS switch zeker helpen mocht er ooit een feed wegvallen.

Desondaks toch jammer dat Grafix een outage geeft gehad. Sterkte met het oplossen/achterhalen van het probleem! :)

Rob77
15/06/10, 09:13
Nou, het is dinsdag, benieuwd naar het volledige verslag :)

dennis0162
15/06/10, 09:50
Ze zijn er nog mee bezig:



Geachte relatie,

Vandaag is een start gemaakt met het doormeten van onze volledige
UPS-installatie. Om de juiste stroomgegevens te verkrijgen is het
noodzakelijke dat de data in de opvolgende periode van 24uur wordt
gelogged. Het meten zal derhalve doorlopen tot dinsdagmiddag 1500u.

Met behulp van deze data en de data van de storing afgelopen zondag
zullen we in de komende dagen de oorzaak van de stroomdip kunnen
achterhalen. Op basis van deze uitkomst zullen de noodzakelijke
vervolgstappen via de mailinglist kenbaar worden gemaakt.

Vertrouwende u hiermee voorlopig voldoende te hebben geinformeerd,

Met vriendelijke groet,

Rob77
15/06/10, 10:25
Ze zijn er nog mee bezig:


Ah kijk aan, ben benieuwd :)

Apoc
15/06/10, 11:27
Voor het netwerk kan dat heel goed idd. Alleen dan zul je alsnog al die 12 racks moeten gaan verhuizen en dat levert weer kort downtime op. Ik denk dat Swiftway dat bedoeld.

Zoals ik al aangaf, je kan ook gewoon over het netwerk verhuizen en dan heb je dus helemaal geen downtime. Ja, het is veel werk, maar het lijkt me de moeite waard. Maarja anderzijds.. als je als hoster al niet in je eigen primaire infrastructuur wilt investeren (m.a.w. een kwaliteit datacentrum) dan zal dat er ook wel niet in zitten.


De A & B feed zijn volgens mij enkel bedoeld om hoge vermogens te leveren aan racks.

Dan zijn het dus geen A & B feed maar gewoon 2 A feeds. Als het als A+B verkocht wordt, dan moeten het gewoon twee volledig gescheiden feeds zijn.

D. ter Horst
15/06/10, 11:38
De feeds zijn volgens mij ook gescheiden op een deel van het traject. Er staan bijvoorbeeld aparte verdeelkasten op de verdiepingen voor de A en B feeds. Theoretisch zou er dus een feed uit kunnen vallen door bijvoorbeeld overbelasting of kortsluiting, en blijft de tweede feed gewoon werken.

Hoe het zit qua UPS'en durf ik niet te zeggen, maar uit ervaring kan ik vertellen dat onze ATS'en bij Grafix nogal eens wil wisselen van feeds door een piek op dip in de spanning. Het wegvallen van een enkele feed hebben we nog niet meegemaakt, dus de mate van scheiding is niet helemaal duidelijk.

dennis0162
15/06/10, 11:45
Beide feeds komen op dezelfde UPS'en uit.

Valt de UPS volledig uit dan vallen zowel de A als B feed uit.
Mocht er een UPS uitvallen neemt de HOT-spare UPS het direct over.

WeServIT
15/06/10, 11:47
Ik hoop dat ze een oorzaak kunnen achterhalen en dit permanent kunnen oplossen. In Alphen draait vrijwel dezelfde setup kwa UPS installatie is mij verteld. Na de vorige storing is daar zelfs de fabrikant uit Italië geweest. Ik moet er niet aan denken dat in Alphen de stroom uitvalt door dezelfde soort fout in de UPS installatie als in Capelle.

Ze hebben na de vorige stroomstoringen in Capelle wel de hele installatie vervangen, maar permanent is het niet opgelost. Het heeft dan wel ongeveer twee jaar gedraaid, maar er zijn genoeg datacenters die een veel hogere uptime hebben.

Colution
15/06/10, 12:22
Je zou dan maar eens op Netrouting zitten en niks hebben te maken met de grafix lijn ! lang leven ....

phreak
15/06/10, 12:30
Je zou dan maar eens op Netrouting zitten en niks hebben te maken met de grafix lijn ! lang leven ....

Ik zat ook niet op het GrafiX netwerk, maar op het Caveo netwerk, maar heeft er verder ook geen bal mee te maken als de stroom eraf gaat..

SF-Jeroen
15/06/10, 12:36
Is het eigenlijk toegestaan een 19" UPS op te hangen in je rack? Of mag dat niet van de brandweer?

phreak
15/06/10, 12:38
Is het eigenlijk toegestaan een 19" UPS op te hangen in je rack? Of mag dat niet van de brandweer?

Dat mag, staat nergens dat dat niet mag.

Apoc
15/06/10, 12:54
Beide feeds komen op dezelfde UPS'en uit.

Valt de UPS volledig uit dan vallen zowel de A als B feed uit.
Mocht er een UPS uitvallen neemt de HOT-spare UPS het direct over.

Dan kunnen ze die B-feed beter juist niet door de UPS sturen, zodat je gewoon netstroom kunt gebruiken als de UPS er weereens uit ligt. Maar naar mijn mening kun je uberhaupt niet van een B-feed spreken als deze op dezelfde UPS uitkomt.


Dat mag, staat nergens dat dat niet mag.

In erg veel datacenterreglementen staat dat je geen giftige stoffen en zuren en dergelijke mag plaatsen. Een UPS maakt gebruik van loodzuur. Dus ik zou het in ieder geval even navragen voordat je er een aanschaft. Kan me niet voorstellen dat ze er moeilijk over zullen doen (sterker nog, ze zullen het wss toejuichen).

phreak
15/06/10, 12:57
In erg veel datacenterreglementen staat dat je geen giftige stoffen en zuren en dergelijke mag plaatsen. Een UPS maakt gebruik van loodzuur. Dus ik zou het in ieder geval even navragen voordat je er een aanschaft. Kan me niet voorstellen dat ze er moeilijk over zullen doen (sterker nog, ze zullen het wss toejuichen).

Toon reageerde eerder in dit topic dat hij al UPS'en in zijn racks had hangen, dus ze zullen het vast niet erg vinden..

WeServIT
15/06/10, 14:05
Je zou dan maar eens op Netrouting zitten en niks hebben te maken met de grafix lijn ! lang leven ....

Wat bedoel je hiermee?

D. ter Horst
15/06/10, 14:07
Wat bedoel je hiermee?

Er zijn een aantal partijen met een eigen netwerk binnen GrafiX, waaronder Netrouting. Kortom, als de core switches uitvallen heeft meneer bij Netrouting nog steeds een netwerkverbinding. Jammer alleen dat wanneer exact deze situatie was ontstaan in Alphen (waar Netrouting zit), de stroom nog steeds onderbroken zou worden ;) Daarnaast is het ook regelmatig andersom geweest, dat Netrouting problemen ondervond en GrafiX niets, dus kortom; het zegt weinig.

Magus
15/06/10, 15:04
In alphen hebben ze volgens mij wel 2 apparte feeds, die dus op apparte ups-en uitkomen. Als het goed is hebben beide ups-en inmiddels ook een eigen hotspare staan Was voorheen 1 hotspare voor beide feeds, als er eentje uitklapte pakte die hotspare over. Nu zouden dat inmiddels 2 hotspares (1 voor elke feed) moeten zijn. Correct me if i'm wrong.

dennis0162
15/06/10, 15:06
Klopt, in Capelle ook.

Apoc
15/06/10, 15:50
Klopt, in Capelle ook.

Uh, je zei eerder nog dat in Capelle beide feeds op dezelfde UPS uitkomen?

Magus
15/06/10, 16:06
zo had ik het ook begrepen, met 1 hotspare voor beide feeds. Dat zou een compleet andere setup zijn dan Alphen in gebruik zou hebben

WeServIT
15/06/10, 16:13
zo had ik het ook begrepen, met 1 hotspare voor beide feeds. Dat zou een compleet andere setup zijn dan Alphen in gebruik zou hebben

Het loopt sowieso allemaal nog over dezelfde trafo dus echt gescheiden feeds heb je niet. Met die extra trafo zijn ze al een enige tijd bezig, dus dat duurt ook niet zolang meer.

Piwi-Web
15/06/10, 16:13
A + B feed hoeft helemaal niet te zorgen voor hogere vermogens per rack. Misschien bij de "budget" datacenters waar 32A wordt geleverd in de vorm van 2x 16A.

STS heeft geen enkele zin? Zal idd weinig zin hebben als de A + B feed niet op orde is. Wanneer de stroomvoorziening wel goed op orde is, en redundant is opgebouwd dan zul je zeker profijt hebben van een ATS/STS!
Ik heb zelf in Groningen ook STS switches in de racks hangen. Draait als een trein, echter is daar de stroomvoorziening ook heel wat beter opgebouwd dan menig datacenter ;-) In mijn geval zal de STS switch zeker helpen mocht er ooit een feed wegvallen.

Desondaks toch jammer dat Grafix een outage geeft gehad. Sterkte met het oplossen/achterhalen van het probleem! :)

Uitleg is explicitiet bedoeld @ zijn reactie. Niet wat een ATS/STS doet en dat het wel handig is als je A en B feed gebruikt worden (en aangelegd zijn) zoals bedoeld...

Piwi-Web
15/06/10, 16:17
Je zou dan maar eens op Netrouting zitten en niks hebben te maken met de grafix lijn ! lang leven ....

Waar slaat die reactie nu weer op?
De UPS'en e.d. worden toch echt wel onderhouden door Grafix.
Verdiep je eerst eens in de infrastructuur voordat je loze berichte gaat posten ;)

dennis0162
15/06/10, 17:09
Uh, je zei eerder nog dat in Capelle beide feeds op dezelfde UPS uitkomen?

Foutje:)

D. ter Horst
15/06/10, 17:48
Het loopt sowieso allemaal nog over dezelfde trafo dus echt gescheiden feeds heb je niet. Met die extra trafo zijn ze al een enige tijd bezig, dus dat duurt ook niet zolang meer.

Dat is een afweging; je kunt het wel tot de stroomcentrale scheiden, maar dat is niet te betalen. De kosten van een trafostation lopen in de tienduizenden euro's, terwijl het amper meerwaarde hoeft te bieden wanneer de UPS'en 100% gescheiden uitgevoerd zijn. De generator kan beide feeds zonder problemen opvangen, ook wanneer deze gescheiden zouden zijn en beiden een eigen UPS 'cluster' zouden hebben. Hiermee heeft een ATS ook al daadwerkelijk nut, zonder dat je ~40K moet neertellen voor een trafostation ;-)

Het is niet anders dan je in een rack hebt, waar je ook een UPS, ATS en weet ik wat kunt installeren. Het enige wat verschilt is de schaal, en het uiteindelijke resultaat is alleen maar dat je je SPOF van je af schuift. Het is voornamelijk afhankelijk van hoeveel geld je er in wilt investeren. Op een bepaald moment bereik je gewoon een grens waar het geinvesteerde geld geen echte meerwaarde meer zal bieden.

Colution
15/06/10, 18:00
Ik zat ook niet op het GrafiX netwerk, maar op het Caveo netwerk, maar heeft er verder ook geen bal mee te maken als de stroom eraf gaat..

Sorry heb er waarscheinlijk over heen gelezen, dacht dat het puur om het netwerk ging.

WeServIT
16/06/10, 22:53
Is er al wat meer bekend over de oorzaak en eventuele oplossingen? Ik krijg geen mails van de zaken rondom Capelle, maar vind het toch interessant om te weten wat nu precies de oorzaak was.

BDigitinternetdiensten
17/06/10, 00:36
De exacte oorzaakt komt binnen een paar dagen voor uit de logs van de UPS-en, deze willen ze een aantal dagen loggen om zo precies de verschillen te zien, verder is er bekend dat er 1 ups was uitgevallen rond 18:45, die zich om 19:12 ging terug schakelen. Daarin is er een stroomdip geweest van 9 seconden(heb ik gemeten), De overgang van 2 naar 3 UPS-en is dus verkeerd gegaan

Mathew
17/06/10, 00:57
Nog iemand last?
Hier last van IPv6 die er vantussen is...

BDigitinternetdiensten
17/06/10, 01:06
Alles draait alweer prima. Ben je direct klant van ze? of klant van een klant van een klant?

Mathew
17/06/10, 01:19
2e optie :) zal eerst even daar aankloppen dan...

The-BosS
17/06/10, 02:49
2e optie :) zal eerst even daar aankloppen dan...

Liefst wel ja, of loop je ook direct naar de fabriek ipv de garage (autoverkoper) als je auto het niet doet :p

BDigitinternetdiensten
17/06/10, 10:56
Grafix helpt sowieso klanten van klanten niet :)

oehTie
17/06/10, 11:32
De exacte oorzaakt komt binnen een paar dagen voor uit de logs van de UPS-en, deze willen ze een aantal dagen loggen om zo precies de verschillen te zien, verder is er bekend dat er 1 ups was uitgevallen rond 18:45, die zich om 19:12 ging terug schakelen. Daarin is er een stroomdip geweest van 9 seconden(heb ik gemeten), De overgang van 2 naar 3 UPS-en is dus verkeerd gegaan

heb jij gemeten, was dat niet mijn ipo log ;)? slimmerd

in ieder geval, op 1 server na hier geen problemen gehad. Bios batterij bleek dood dus server was even vergeten dat na een stroomstoring hij vanzelf weer aan mag gaan.