Bekijk Volledige Versie : Capelle a/d IJssel (Stroomstoring Grafix, Caveo, Technotop) down?
Jawel, het is weer zover. Iemand meer informatie?
Technotop, Graf-ix, Caveo allemaal down.
Niet alles lijkt down bij ons, maar de helft zeker.
We zitten in Alphen / Grafix
Mijn kast (in capelle) is ook weer niet bereikbaar. Heb andere geprobeerde in de directe omgeving en die zijn ook niet bereikbaar.
Damn de 5e keer of zo nu in nog geen half jaar.
BeneluxGaming
28/09/08, 00:29
Hier ook 2 racks eruit.
hostingpower
28/09/08, 00:29
Hier ook alles down ( grafix / caveo netwerk )
idd allemaal niet te bereiken hier(xs4all)
En dat op je vrije zaterdagavond, sterkte allemaal.... :crying:
Hier viel net Technotop / Alphen ook even weg, maar die is hier nu weer helemaal hersteld. Mijn server in Grafix / Capelle aan den IJssel is in ieder geval al een poosje down, 100% loss. Het lijkt om de stroomvoorziening te gaan.
Succes iedereen!
Jap, net alles overgezet op een nieuwe server, nameservers switched en ja hoor -> down.
Hier 18 racks down, waarom nu weer s'avonds, ik heb geen redbull ingeslagen :x
zie ook http://smokeping.maikelgnoc.nl/cgi-bin/smokeping.cgi?target=World.Europe.Netherlands.Cape lle.Apollo
Zit ook al een kwatiertje te pingen maar helaas echt niet bereikbaar. Zelfs de site van grafix is onbereikbaar, die laat je toch tenminte ook op een tweede locatie draaien lijkt mij...
De grafix site heeft het tot 10 minuten geleden nog gedaan zag ik.
Ik had dit liever om 2 uur snachts gehad. Dan hebben onze klanten er niet zo'n last van...
De grafix site heeft het tot 10 minuten geleden nog gedaan zag ik.
Ik had dit liever om 2 uur snachts gehad. Dan hebben onze klanten er niet zo'n last van...
gelukkig heb ik er geen last van.. maar.. ik heb het liever helemaal niet en al helemaal niet iedere maand :(
Ik zit nog maar een half jaar in capelle maar ik verlang terug naar telecity 2, in jaren geen enkele storing gehad...
Na telefonisch contact: STROOMSTORING.
Is het niet een coreswitch dan ligt er wel de spanning vanaf. Ik heb daar een server staan, maar krijg er echt genoeg van.
[Update] 23:41h.... is weer online
onze reseller account is weer online :-)
ik vind het toch ook een beetje veel aan't worden nu... ben benieuwd
AW-Hosting
28/09/08, 00:43
Vanuit thuis en servers op andere locaties krijg ik ook geen respons van Capelle a/d Ijssel, dus sterkte iedereen! Dit kan voor jullie nog wel eens late avond / nacht worden.
Hier de helft nog steeds down.
en weg issie weer :@ zal goed zijn voor de hardware, spanning erop, eraf, erop eraf......
Kan iemand bevestigen of ontkrachten dat het om een stroomstoring gaat?
J. Brunink
28/09/08, 00:50
Er zullen er weer wat sneuvelen..
en weg issie weer :@ zal goed zijn voor de hardware, spanning erop, eraf, erop eraf......
de onze nog steeds bereikbaar :-) 't wordt dus toch nog spannend aan uw quote te zien...
Succes gewenst. Hoop voor een ieder dat het snel opgelost is. Het is wel de Wet van Murphy die daar rondzweeft he ?
Kan iemand bevestigen of ontkrachten dat het om een stroomstoring gaat?
Ik heb rond 22:30 gebeld en er werd gezegd dat het een stroomstoring was. Waarom de UPS niet is aangesprongen was niet bekend.
Hm, net gisteren m'n server daar opgehangen, een goed begin zo . . .
mijn server is wel te bereiken (via redunix co-located)
Ik heb rond 22:30 gebeld en er werd gezegd dat het een stroomstoring was. Waarom de UPS niet is aangesprongen was niet bekend.
Hoezo, alles hoort standaard op de ups aangesloten te zitten.
Anders heeft een ups niet zoveel zin... ;)
Ik denk dat je de dieselgeneratoren bedoelt?
Ik wens iedereen veel sterkte en hopend is de storing snel opgelost. En inderdaad liever in de nacht als laat in de avond.
Mijn server (shared colo bij CCC Hosting) is zonet down geweest en weer automatisch up gekomen (22:35 uur). Ik ben erg benieuwd naar de oorzaak; naar mijn idee is dit ook al tè vaak aan het voorkomen...
Sterkte voor diegenen die er slechter vanaf komen vanavond.
hostingpower
28/09/08, 00:57
En we zijn weer online.
Hoezo, alles hoort standaard op de ups aangesloten te zitten.
Anders heeft een ups niet zoveel zin... ;)
Ik denk dat je de dieselgeneratoren bedoelt?
Je hebt gelijk. :) Maarja.. blijft wel een geweldig systeem. (als het werkt)
Laatst werkte de UPS anders niet door een fout in het schakelblok (of iets dergelijks).
Ik moet zeggen ze mogen de boel wel eens testen, zodat het tenminste werkt als de stroom uitvalt
AW-Hosting
28/09/08, 01:04
Noem maar eens één datacenter waar het bij een stroomstoring WEL goed is gedaan nadat de UPS leeg was en wou overschakelen op de (diesel)generator.
Veelal zou het moeten werken maar in de praktijk zie je toch dat het vaak niet goed functioneert.
Maarja we zullen nu maar weer terug ontopic gaan over de storing in het Capelle a/d IJssel datacenter:)
EDIT: Iemand eventueel al een update??
van mijn leverancier daar, maar daarna ging ie nog een keer:
Datum : Zaterdag 27 september van 20:30 uur tot 22:50
Tijdsduur : 2:20
Lokatie : GrafiX NOC te Capelle
De stroomstoring van eerder op de avond is verholpen.
De oorzaak was dat de A-feed te weinig voltage gaf. Het betreffende apparaat
dat hiervoor zorgt is vervangen.
Voor het vervangen van het apparaat was het echter wel nodig om de gehele
A-feed uit te zetten.
Dit betekend dat ook klanten in andere racks hier last van hebben
ondervonden door een stroomonderbreking van enkele minuten.
Noem maar eens één datacenter waar het bij een stroomstoring WEL goed is gedaan nadat de UPS leeg was en wou overschakelen op de (diesel)generator.
Veelal zou het moeten werken maar in de praktijk zie je toch dat het vaak niet goed functioneert.
Maarja we zullen nu maar weer terug ontopic gaan over de storing in het Capelle a/d IJssel datacenter:)
EDIT: Iemand eventueel al een update??
Hitachi datacenter, waar die apache de stroomkabels raakte
En verder weet je het vaak niet OMDAT het dus werkt.
Ben nog steeds offline hoor?
Ben nog steeds offline hoor?
kan zijn dat je ext2 filesystem zich tien slagen in de rondte aan het checken is
Noem maar eens één datacenter waar het bij een stroomstoring WEL goed is gedaan nadat de UPS leeg was en wou overschakelen op de (diesel)generator.
Veelal zou het moeten werken maar in de praktijk zie je toch dat het vaak niet goed functioneert.
Maarja we zullen nu maar weer terug ontopic gaan over de storing in het Capelle a/d IJssel datacenter:)
EDIT: Iemand eventueel al een update??
UPS moet nooit leeg gaan... word puur gebruikt voor de tijd dat de generator nodig heeft om op te starten
@ t.bloo: Nee hoor, anders moest ik hem via IPMI wel kunnen bereiken.
[off-topic]
Tevens draai ik ext3, server heb ik er afgelopen maandag geplaast hehe.
[/off-topic]
We doen ons best om de oorzaak te ontdekken. Het is niet te geloven dat ons dit weer overkomt.
Ik hoop zsm een concrete oorzaak te kunnen melden, maar die is nu nog niet voorhanden.
De netspanning van de nieuwe trafo bleef correct werken, alleen de UPS viel uit. Het starten van de generator ( die niet automatisch gestart werd omdat de netspanning in orde bleef ) had geen verschil gemaakt.
Het ziet er vooralsnog naar uit dat de bypass in de UPS defect is, maar dit is voorlopgi nog speculeren.
Sorry dat ik nog niets concreets kan melden...
De stroom is inmiddels weer enige tijd geleden opgestart.
Marco
idd nog niet bereikbaar (0:11)
Ik denk dat het nog even wachten is totdat alles daar weer werkt.
Stationsplein 20
Capelle a/d IJssel
24 x 2 treetje Redbull
Op rekening van:
Technotop Internetdiensten
Veel down nog...
@ Technotop
Het is dat ik op een verjaardag "vast" zit en niet meer mag rijden :), anders was ik graag even wat versnaperingen komen bezorgen. Iedereen zal er wel goed gaar van worden daar.
Bedankt voor de uitleg ieder geval.
De schade deze keer; 1 server die niet wilde starten. Na disk checks uiteindelijk toch gelukt via kvm maar wel weer een raid schijf die vervangen moet worden. Dat brengt de materiele schade op 4 schijven geloof ik door de stroomstoringen, de indirecte schade is natuurlijk niet te meten en veel groter. Wat ook echt killing is voor die machines zijn die keren dat de stroom er op-af-op-af-op-af gaat. Zou ik ook van stuk gaan geloof ik :-)
Maar; dit is nu te vaak gebeurd. Gelukkig het ik het verhuis draaiboek nog liggen.
@ t.bloo: Nee hoor, anders moest ik hem via IPMI wel kunnen bereiken.
[off-topic]
Tevens draai ik ext3, server heb ik er afgelopen maandag geplaast hehe.
[/off-topic]
Idd.
Ons bakje heeft ook IPMI, reageert (nog) niet, begin nerveus te worden ;)
De gateway reageert wel, dus de machine lijkt aan te staan . . .
mijn server ook nog niet te bereiken... begin langzaamaan de kriebels te krijgen.
84.243.252.xxx
Nog steeds niets..
BeneluxGaming
28/09/08, 01:35
Hier werkt alles weer...
De stroom staat er inmiddels weer een tijd op. Als de servers correct booten zouden ze dus bereikbaar moeten zijn.
Waar hangen de servers die dat niet zijn? Hebben jullie de provider al benaderd waarbij je de dienst afneemt? Mogelijk zijn die hier aanwezig in het pand, er lopen verschillende bedrijven rond.
PS; de batterijen van de UPS zijn niet aangesproken. Deze zaten nog vol. Het UPS chassis is uitgevallen en dit is niet overgenomen door de by-pass.
Telefoontje naar mijn leverancier geeft aan dat nog niet alles online is. Dus nog maar wachten. Ik hoop dus niet dat er iets van Hardware defect is.
Geduld.....
@ Grafix: WorldStream nog steeds offline...
Zijn nog wel meerdere partijen offline... Suc6 voor de mensen die nog problemen ondervinden. Er zijn wel leukere dingen te doen op de zaterdagavond.
@ Grafix: WorldStream nog steeds offline...
WS is live... Probeer hun even te bereiken anders hoor ik het wel.
En we zijn weer online.. :)
EDIT: Jup, ben net 4 min online.
Mocht er nog een server offline zijn bel dan even met ons op: 010 264 0210.
Meeste servers moeten weer draaien.
ccchosting
28/09/08, 06:40
Zo weer een feestje onderbroken, nachtje cel geriskeert door met te veel alchol naar capelle te moeten rijden en dit bij mist zicht minder dan 5 meter.
Aangepaste mailling naar onze klanten zal morgen verstuurd worden.
jeroen2496
28/09/08, 08:14
Pffff, heb sinds kort een server in Alphen, is deze ook geraakt door de storing?
Ik zat eerst bij Redunix, die waren vannacht bezig met het verhuizen van al hun servers
van de Spaanse Kubus naar Capelle..., blij dat ik daar weg ben iig.
In het verleden ook stroomstoringen meegemaakt, resultaat, hele array naar de klote!
Ging de storing nou om 1 feed, of toch meerdere feeds? En de feeds online bleven, bleven de switches er achter ook online?
Ik heb nog een server in Amsterdam (PCextreme), en deze is vannacht wel offline gegaan, om half 1 tot 3 uur, toeval?
De oorzaak was dat de A-feed te weinig voltage gaf. Het betreffende apparaat
dat hiervoor zorgt is vervangen.Voltage? Leuke term. :thumbup:
Pffff, heb sinds kort een server in Alphen, is deze ook geraakt door de storing?
Wij zitten in Alphen aan den Rijn, en hebben helemaal geen last gehad van deze storing. Er was geen onderbreking dus 0% packetloss.
Ik ben toch benieuwd wat nu de oorzaak was, want dit is al de zoveelste stroomstoring daar. Ben blij dat ik in Alphen nog geen storing heb gehad.
jeroen2496
28/09/08, 11:03
Wij zitten in Alphen aan den Rijn, en hebben helemaal geen last gehad van deze storing. Er was geen onderbreking dus 0% packetloss.
Ik ben toch benieuwd wat nu de oorzaak was, want dit is al de zoveelste stroomstoring daar. Ben blij dat ik in Alphen nog geen storing heb gehad.
Klop dat ff af! :clown:
Zo weer een feestje onderbroken, nachtje cel geriskeert door met te veel alchol naar capelle te moeten rijden en dit bij mist zicht minder dan 5 meter.
Aangepaste mailling naar onze klanten zal morgen verstuurd worden.
Offtopic; als ik jou was zou ik toch eens gaan nadenken over je acties.
ooit eens er aan gedacht dat het mis kan gaan waarbij anderen betrokken zijn?
MediaServe
28/09/08, 12:03
Zo weer een feestje onderbroken, nachtje cel geriskeert door met te veel alchol naar capelle te moeten rijden en dit bij mist zicht minder dan 5 meter.
Je riskeert wel veel meer dan een nachtje cel hoor...
Bel dan een taxi of laat de bob voor je rijden.
ccchosting
28/09/08, 13:17
Mwah, was al aardig nuchter toen ik in de auto stapten, ik heb ook me grenzen.
En tja ben nooit in alphen geweest, geen behoefte meer aan.
Maar ik hoop dat het daar allemaal net ietjes beter is geregeld.
Niemand aanwezig momenteel in Cappele aan de ijsel ? die even naar onze server kan kijken waar die blijft hangen in ze boot proces ?
Niemand aanwezig momenteel in Cappele aan de ijsel ? die even naar onze server kan kijken waar die blijft hangen in ze boot proces ?
Ik zou de storingsdienst van Grafix bellen. Misschien dat er nog een van hun is. Misschien is technotop ook nog daar.
jeroen2496
28/09/08, 13:32
Mwah, was al aardig nuchter toen ik in de auto stapten, ik heb ook me grenzen.
En tja ben nooit in alphen geweest, geen behoefte meer aan.
Maar ik hoop dat het daar allemaal net ietjes beter is geregeld.
Per 1 oktober heb ik daar een rack, ze zijn druk bezig met verbouwen, t netwerk is tot nu toe erg stabiel daar!
We zijn nu 13 uur verder en alles moet weer draaien. De nieuwe transformater draait sinds een week en heeft er gisteravond ook niet uit gelegen. De precieze oorzaak weten we op het moment nog niet
Pffff, heb sinds kort een server in Alphen, is deze ook geraakt door de storing?
Nee. Enkel een kleine hik van ongeveer 30 seconden om de routes om te gooien. Wel hadden we op een aantal losse ranges problemen richting UPC en Planet Internet.
Per 1 oktober heb ik daar een rack, ze zijn druk bezig met verbouwen, t netwerk is tot nu toe erg stabiel daar!
Inderdaad, onze leverancier zit bij Netrouting, en wij zijn erg tevreden over het netwerk.
De pings naar het buitenland zijn erg goed, en dat is één van de dingen wat goed moet zijn bij een GSP.
!request slotje
rest volgt over mailinglists
Ik denk dat ze dit topic beter open kunnen laten tot dat er meer duidelijkheid is over de oorzaak van deze storing.
Die geeft GrafiX per mail, en die krijg jij ook van je leverancier.
Het is meer een 'gelukkig zitten wij daar en daar' topic geworden.
Anders kunnen we wel een apart Netwerk Storingen en Updates (GRAFIX) aanmaken? :D
Niemand aanwezig momenteel in Cappele aan de ijsel ? die even naar onze server kan kijken waar die blijft hangen in ze boot proces ?
Ik weet niet wie ik moet bedanken, maar toch bedankt voor de snelle en goede service van het weer online brengen van onze server.
waarom leren mensen geen STS te gebruiken aangezien enkel de A-Feed down was zou dan alles gewoon zijn blijven draaien op de B-Feed.
Omdat een STS nogal kostelijk kan zijn voor één of een paar servertjes? :)
Moet je er natuurlijk ook rekening mee houden dat een paar servertjes down hebben ook kostelijk kan zijn..
Omdat een STS nogal kostelijk kan zijn voor één of een paar servertjes? :)
Moet je er natuurlijk ook rekening mee houden dat een paar servertjes down hebben ook kostelijk kan zijn..
~400-450€ voor een deftige STS moet voor een provider toch zo geen grote kost zijn? gezien de elende die het kan besparen.
waarom leren mensen geen STS te gebruiken aangezien enkel de A-Feed down was zou dan alles gewoon zijn blijven draaien op de B-Feed.
Nee hoor, beiden feeds waren down.
We hebben meerdere STS'es hangen, alleen er is 1 groot UPS systeem, dat faalde, en dus beiden feeds gewoon dood.
waarom leren mensen geen STS te gebruiken aangezien enkel de A-Feed down was zou dan alles gewoon zijn blijven draaien op de B-Feed.
Omdat je dan alsnog een spof heb, wij gebruiken daar 2 voedingen voor, of compleet redundante machines(echt seperate machines dus).
Grafix had eerder in het topic vermeld dat enkel de A-Feed down is gegaan?
Dat gaat over een eerdere storing op de avond.
Deze staan los van elkaar
De grote storing betrof alle feeds.
Was dat dan een storing of gewoon een power down zodat er aan de stroom gewerkt kon worden?
Storing, exacte oorzaak (nog) niet bekend, met een juiste by-pass was het voorkomen, dus deze wordt binnenkort vervangen (eerder dan in de planning was)
jeroen2496
28/09/08, 16:29
Was Redunix niet toevallig bezig met het verhuizen van alle racks?
Denk het niet. Lijkt me sterk dat ze dat zouden doen zonder hun klanten eerst te waarschuwen.
Ik zat eerst bij Redunix, die waren vannacht bezig met het verhuizen van al hun servers
van de Spaanse Kubus naar Capelle..., blij dat ik daar weg ben iig.
Blijkbaar wel.
Storing = verholpen.
Individuele problemen == > dienstverlener.