Bekijk Volledige Versie : Airco storing EvoSwitch
FransVanNispen
14/09/07, 13:32
Geen idee of deze hier mag staan, maar wellicht een belangrijke mededeling voor collega's:
Een aantal minuten gelden zijn de Airco's in EvoSwitch uitgevallen. De temperatuur daar stijgt erg snel.
Meer info heb ik helaas niet. Krijg dit net door van onze technicus ter plaatse.
Sterkte, begin maar vast met uitschakelen van apparatuur voordat het overhit raakt en doorbrand oid....
Is de powerfeed niet weg gevallen? Dan is namelijk 't eerste wat stopt de airco. Kwam zo in mij op hoor. ;)
FransVanNispen
14/09/07, 13:49
Net contact gehad met mijn collega, die gaat nu met spoed alles uitschakelen. Het schijnt dus nogal serieus te zijn.
Dat is balen. Straks is het daar een sauna :(
blackdragon
14/09/07, 14:06
ja dat gaat hard hoor:P
Helaas een gelijke ervaring met deze situatie gehad een paar jaar terug.
Succes Frans!
Ik las net al op een van mijn servers dat het daar boven de 60 graden is...
Ik las net al op een van mijn servers dat het daar boven de 60 graden is...
Ouch, hopelijk komt er snel een oplossing dan.
Ik las net al op een van mijn servers dat het daar boven de 60 graden is...
Trek je zwembroek maar aan....
Is er niemand aanwezig met een fototoestel? :p
Ik las net al op een van mijn servers dat het daar boven de 60 graden is...
Lijkt me niet de temperatuur van de ruimte zelf, maar de temperatuur in de server.
Swiftway-UK
14/09/07, 14:38
Tijd om je servers uit te schakelen btw!
Uitschakelen je machine(s), anders wordt ie binnen een uur gefrituurd!
Trek je zwembroek maar aan....
Is er niemand aanwezig met een fototoestel? :p
Ik hoef die vieze IT'ers niet in zwembroek te zien hoor..
Tenzij het vrouwelijke ITsters zijn ;)
Maar hoe kan het voorkomen dat werkelijk alle airco's uitvallen?
Zo'n beetje alles wordt redundant uitgevoerd of gevoed, waarom een airco niet?
Ik snap ook wel dat er meedere airco systemen aanwezig zijn, maar dat ze nou allemaal tegelijk uitvallen:S
Ik hoef die vieze IT'ers niet in zwembroek te zien hoor..
Tenzij het vrouwelijke ITsters zijn ;)
Maar hoe kan het voorkomen dat werkelijk alle airco's uitvallen?
Zo'n beetje alles wordt redundant uitgevoerd of gevoed, waarom een airco niet?
Ik snap ook wel dat er meedere airco systemen aanwezig zijn, maar dat ze nou allemaal tegelijk uitvallen:S
Misschien is het probleem het stukje ICT dat zorgt dat airco systeem B aangaat als systeem A niet voldoende werkt. Of een kapotte sensor, kapotte bediening, wie zal het zeggen :)
Als je leest wat er de laatste jaren in de Nederlandse DC's allemaal is gebeurd vraag je je wel af of dit nou weer typisch NL is of dat dit ook met zo'n regelmaat in het buitenland gebeurd.
blackdragon
14/09/07, 14:46
@hadrian toevallig mrtg temp stats online staan ?
Veel succes jongens.. door dit gaat er weer heel wat hardware de container in helaas
FransVanNispen
14/09/07, 14:48
Misschien is, net als bij een standaard rack in EvoSwitch, het airco circuit ook niet redundant (hoewel me dit onwaarschijnlijk lijkt).
Laatste melding die ik net kreeg is dat een deel weer aan staat, maar de brand kleppen niet open willen. Ze kunnen deze blijkbaar niet manueel bedienen.
Het vermoeden is dat er ergens brand is of was kreeg ik door. Hoewel dit wel vaag is. Zo'n modern datacenter zou dat toch moeten melden op zo'n mooi scherm en met edelgas gaan spuiten in dat geval?
Hopelijk komt er snel meer duidelijkheid. Wij hebben in iedergeval uit voorzorg alles uitgezet.
We zullen nu.nl wel weer halen, want hyves is nu ook uit de lucht.
Nope geen stats online.
Ik kreeg ineens van alle servers tegelijk snmp-alerts binnen. Na een telefoontje maar besloten om de power er overal af te halen.
Ben benieuwd hoe lang dit gaat duren...
We zullen nu.nl wel weer halen, want hyves is nu ook uit de lucht.Hyves snap ik nou niet. Zoveel servers, meerdere lokaties, en toch zo enorm afhankelijk van een datacenter. Toen easynet plat ging lag hyves plat. Nu evo aan de beurt is gaat hyves weer plat?
Misschien is het nuttig om even op een antwoord van Evoswitch te wachten ipv loos te speculeren ? :)
Hyves heeft alle capaciteit nodig. Wanneer de helft wegvalt, kunnen ze ook niet doordraaien. Dat ze op twee locaties zitten is niet hoofdzakelijk voor redundancy, alswel dat ze in Easynet niet meer servers bij konden plaatsen.
Maargoed, das offtopic ;)
Hyves snap ik nou niet. Zoveel servers, meerdere lokaties, en toch zo enorm afhankelijk van een datacenter. Toen easynet plat ging lag hyves plat. Nu evo aan de beurt is gaat hyves weer plat?
Misschien zijn ze verhuisd van easynet naar evoswitch na de laatste storing? ;)
Maar je hebt gelijk, zoveel servers en meerdere datacentra en dan nog plat gaan...
Hyves heeft alle capaciteit nodig. Wanneer de helft wegvalt, kunnen ze ook niet doordraaien. Dat ze op twee locaties zitten is niet hoofdzakelijk voor redundancy, alswel dat ze in Easynet niet meer servers bij konden plaatsen.
Maargoed, das offtopic ;)
Dan nog zouden ze het zo kunnen maken dat je ipv een niet bestaande pagina gewoon een leuke hyves page krijgt :)
Advertentie inkomsten moeten doorlopen he :cool:
Uitschakelen je machine(s), anders wordt ie binnen een uur gefrituurd!
Kom er net achter dat er wat aan de hand is.. en het draait nog steeds. Er wordt nu contact opgenomen met LSW hoe of wat.
Dan nog zouden ze het zo kunnen maken dat je ipv een niet bestaande pagina gewoon een leuke hyves page krijgt :)
Advertentie inkomsten moeten doorlopen he :cool:
Daar ben ik het idd mee eens :# Maar misschien zit meneer Spanjar uitgebreid te lunchen en heeftie het niet door ;)
Ik werd net gebeld: De temperatuur is dalende (maar nog niet binnen acceptabele niveaus).
FransVanNispen
14/09/07, 15:20
Goed nieuws: de temperatuur is inmiddels weer flink gezakt en we gaan weer opstarten. Wel benieuwd naar de uiteindelijke verklaring.
was trouwens afgelopen zondag al ontzettend warm in evoswitch, vergeleken met normaal. Airco's gaven 30/31 graden aan, weet niet welke temperatuur dit was, maar ik ben eerder weggegaan omdat ik daar dood ging van de warmte :). Koude gangen waren ook niet bijzonder koud meer.
En technicus van ons is aanwezig. Het schijnt er nog steeds erg warm te zijn. Twee servers van ons hebben zichzelf preventief uitgeschakeld. Wat er precies gebeurd is, is ons ook nog onduidelijk. We wachten af.
FransVanNispen
14/09/07, 15:48
Het was mij al eerder opgevallen dat de verhouding tussen binnen de koude gang en daarbuiten extreem is. Het is om te werken aan de achterzijde héél erg onaangenaam.
De temperatuur is flink gezakt en nog zakkende. Nog niet optimaal, maar we hebben wel alles al weer online gezet. Ik ga ervan uit dat de storing is opgelost.
En technicus van ons is aanwezig. Het schijnt er nog steeds erg warm te zijn. Twee servers van ons hebben zichzelf preventief uitgeschakeld. Wat er precies gebeurd is, is ons ook nog onduidelijk. We wachten af.
Lijkt erop dat 1 van onze servers zich ook heeft afgesloten. Net even contact opgenomen om een reboot uit te voeren. Ben overigens benieuwd wat nu de exacte reden is/was. Nog nooit problemen ondervonden in EvoSwitch zelf.
Swiftway-UK
14/09/07, 16:56
Ben overigens benieuwd wat nu de exacte reden is/was. Nog nooit problemen ondervonden in EvoSwitch zelf.
Het is dan ook een vrij nieuw datacentrum natuurlijk.
Helaas zijn de speculaties weer begonnen. In tegenstelling tot wat sommigen beweren of denken te weten is er GEEN brand geweest. De exacte oorzaak moet nog gevonden worden maar zit naar alle waarschijnlijkheid in de regelapparatuur van de airco systemen. De storing kwam naar voren tijdens reguliere tests.
Op dit ogenblik is de temperatuur in het gehele DC weer op bedrijfstemperatuur en draait alles op volle toeren. Zodra er een RFO beschikbaar komt vanuit EvoSwitch zal deze op onze NOC-pagina komen te staan.
Rolph Haspers
Operational Director
LeaseWeb B.V.
Merlijn, zijn er op dit moment nog hoge temperaturen?
Momenteel draait mijn server op 48°C op het mobo, terwijl dit voorheen nog geen 35 was.
Problem solved:
Zodra er een RFO beschikbaar komt vanuit EvoSwitch zal deze op onze NOC-pagina komen te staan.