Bekijk Volledige Versie : Equinix stroomstoring / Oxilion
Het lijkt erop dat het netwerk van Oxilion eruit ligt. Iemand al enig idee en of nieuws hierover?
Het Equinix DC is onbereikbaar, en engineers zijn ter plaatse. Bellen kan naar +316-55377847 in geval van noodgevallen * (http://twitter.com/oxilion/status/16844396482).
Ok, ik neem aan dat ik hetzelfde krijg te horen als ik nu het noodnummer ga bellen ;)
Dus lijkt me niet nodug, ze kunnen beter de energie gebruiken voor een snelle oplossing.
MediaServe
23/06/10, 15:07
Er was een power dip (~ 5 minuten) in Enschede bij Equinix.
Dan hebben die brandweerwagens en ambulance er niets mee te maken die een uur terug naar de Hengelosestraat racete.
Wel bijzonder. Er is dacht ik in geen jaren (nooit) een stroomstoring geweest in Virtu.
Dan hebben die brandweerwagens en ambulance er niets mee te maken die een uur terug naar de Hengelosestraat racete.
Wel bijzonder. Er is dacht ik in geen jaren (nooit) een stroomstoring geweest in Virtu.
nope,
23-06-10 12:52:01 Brandweer Twente PRIO 1 Ongeval met beknelling : HENGELOSESTRAAT 705 7521PA : ENSCHEDE 4231EPN 1171HGC 4091OTW
0603190 Brandweer Hengelo Groep 1 centrum
0604241 Brandweer Enschede Kazernealarm Post-Noord
0605112 Brandweer Regionaal OvD Midden (Info)
0605141 Brandweer Regionaal OvD Oost (Inzet)
0605142 Brandweer Regionaal OvD Oost (Info)
0605205 Brandweer Hengelo HV1-1171 centrum
0605252 Brandweer Regionaal Voertuig OvD Oost
0605259 Brandweer Enschede TS-4132 Noord
0605310 Brandweer Regionaal Monitorcode
MediaServe
23/06/10, 15:21
nope,
23-06-10 12:52:01 Brandweer Twente PRIO 1 Ongeval met beknelling : HENGELOSESTRAAT 705 7521PA : ENSCHEDE 4231EPN 1171HGC 4091OTW
Is wel op een steenworp afstand volgens mij, maar ik zie zo geen verband.
Argh, maar gelukkig is het niet mijn server.
Zal toch wel eens de backup weer beter voor elkaar maken.
DennisWijnberg
23/06/10, 15:27
Geen verband. We zijn er HEEL druk mee. Jullie kunnen bij ook bellen op: 06-51995803
Ok, ik neem aan dat ik hetzelfde krijg te horen als ik nu het noodnummer ga bellen ;)
Dus lijkt me niet nodug, ze kunnen beter de energie gebruiken voor een snelle oplossing.
Dacht iedereen er bij een storing nou maar net zo over... zou het leven zoveel mooier maken ;-)
DennisWijnberg
23/06/10, 15:41
Dacht iedereen er bij een storing nou maar net zo over... zou het leven zoveel mooier maken ;-)
Eens, doch begrijpelijk.
Eens, doch begrijpelijk.
Klopt uiteraard.
Maar soms is er een storing die netjes is gepubliceerd op de site, rss feeds, twitter en er verschijnt een knipperende balk op onze servicedesk site.
Vervolgens gaat iedereen dan een ticket insturen om er vervolgens 3 minuten later achteraan te bellen met de vraag wat de status is. Dat schiet gewoon niet op....
Klopt uiteraard.
Maar soms is er een storing die netjes is gepubliceerd op de site, rss feeds, twitter en er verschijnt een knipperende balk op onze servicedesk site.
Vervolgens gaat iedereen dan een ticket insturen om er vervolgens 3 minuten later achteraan te bellen met de vraag wat de status is. Dat schiet gewoon niet op....
Gewoon alles redirecten naar storingspagina en telefoon op de "momenteel is er een storing" voicemail. Tijdens oplossen van de storing kun je verder toch niets betekenen.
Klanten houden gewoon van persoonlijke respons. Als ze bellen, hebben ze echt geen nood aan een bandje dat zegt wat ze eigenlijk al weten. Een persoonlijke 'sorry' vinden ze veel fijner, beseffend dat ze hun eigen storing enkel langer maken :-)
DennisWijnberg
23/06/10, 16:05
Klanten houden gewoon van persoonlijke respons. Als ze bellen, hebben ze echt geen nood aan een bandje dat zegt wat ze eigenlijk al weten. Een persoonlijke 'sorry' vinden ze veel fijner, beseffend dat ze hun eigen storing enkel langer maken :-)
Dat valt bij ons dan wel weer mee want de telefoon wordt momenteel bezet door mensen die niet aan servers mogen komen :p
MediaServe
23/06/10, 16:12
Dennis ga eens aan het werk joh :p
From cir2.ar1.ens.oxilion.net (93.186.191.35) icmp_seq=66 Destination Host Unreachable
Dat is dan weer het voordeel aan je website onderbrengen bij een groter bedrijf natuurlijk :)
DennisWijnberg
23/06/10, 16:22
Dat is dan weer het voordeel aan je website onderbrengen bij een groter bedrijf natuurlijk :)
Waarom?
Gewoon alles redirecten naar storingspagina en telefoon op de "momenteel is er een storing" voicemail. Tijdens oplossen van de storing kun je verder toch niets betekenen.
Dat kun je natuurlijk alleen doen als "alles" of een merendeel van je diensten er uit liggen. Wij zitten op meerdere lokaties, verschillende diensten dan kun je een andere groep klanten niet ook maar negeren en naar een storingspagina en voicemail dirigeren. Melding op de telefoonlijn hebben we sinds kort wel.
MediaServe
23/06/10, 16:33
Waarom?
Hij bedoelt denk ik dat een eenmanszaak geen aparte frontdesk en noc heeft ;)
Hij bedoelt denk ik dat een eenmanszaak geen aparte frontdesk en noc heeft ;)
Zoiets. Als je met twee man werkt, is het nogal moeilijk om een lijn van salesmensen te gebruiken om je te weren tegen boze klanten. :)
Dennis,
Waarom maken jullie geen gebruik van je eigen dienst voor je eigen website etc?
http://www.oxilion.nl/vmware-uitwijkservice
zien klanten meteen de storingsmeldingen ;-)
Succes met het inschakelen van alle servers weer!
DennisWijnberg
23/06/10, 18:03
Dennis,
Waarom maken jullie geen gebruik van je eigen dienst voor je eigen website etc?
http://www.oxilion.nl/vmware-uitwijkservice
zien klanten meteen de storingsmeldingen ;-)
Succes met het inschakelen van alle servers weer!
Veel te duur! ;) Alles draait inmiddels weer!
Veel te duur! ;) Alles draait inmiddels weer!
Geloof dat de jonges van Partyflock het wel beetje zat zijn ;)
DennisWijnberg
23/06/10, 21:03
Geloof dat de jonges van Partyflock het wel beetje zat zijn ;)
Dan moeten ze beginnen met het netwerk via ons af te nemen :) Dan was dit de enige storing geweest afgelopen jaar. (1 te veel, laat dat duidelijk zijn).
ff voor mijn info; Lag heel equinix eruit of gedeelte ?
Bij mijn weten het hele datacenter. Onze directe glasvezel verbinding van het bedrijf naar NDIX lag er ook heel eventjes uit ;) .
Dan moeten ze beginnen met het netwerk via ons af te nemen :) Dan was dit de enige storing geweest afgelopen jaar. (1 te veel, laat dat duidelijk zijn).
Zou met ze in gesprek gaan?
Volgens mij willen de servertjes niet restoren ;)
MediaServe
24/06/10, 12:27
ff voor mijn info; Lag heel equinix eruit of gedeelte ?
Alles, zowel de A als de B feeds.
Hoelang heeft dit ongeveer geduurd?
Hoelang heeft dit ongeveer geduurd?
Volgens mij maar 1 minuut o.i.d. , binnen 5 minuten kreeg ik al weer een melding dat de server weer online was. Voordat dit ding geboot is ben je meestal wel een minuut of twee verder, dus de stroom kan er niet lang af geweest zijn.
dennis0162
24/06/10, 14:08
En dan betaal je zoveel voor een rack. Valt alsnog de A en B feed uit.
En dan betaal je zoveel voor een rack. Valt alsnog de A en B feed uit.
Tja, het blijft techniek he.
En daarnaast zullen veel servers gewoon gebruik maken van 1 feed.
Wat kun je eigenlijk tegen dit soort dingen doen? ik neem aan dat equinix maandelijks toch wel alle systeem test etc. Als je daarna nog gewoon netjes onderhoud pleegt valt er weinig aan te doen toch?
Hier_ben_ik
24/06/10, 14:48
En dan betaal je zoveel voor een rack. Valt alsnog de A en B feed uit.
Zat jij zelf niet in Grafix? ....
dennis0162
24/06/10, 15:12
Klopt, Equinix betaal je 10x zoveel en hun kunnen ook de stroom niet up houden.
ik zet weer een streepje achter het rijtje "A en B zijn geen A en B"...
ik zet weer een streepje achter het rijtje "A en B zijn geen A en B"...
Dat weet je toch niet? Je weet niet eens wat de oorzaak is ;)
Wat was de oorzaak eigenlijk? :drunk:
oorzaak maakt niet zo veel uit natuurlijk, ik vind dat een A en B tot de bron aan toe onafhankelijk moeten zijn anders is het meer een A1 en A2
SebastiaanStok
24/06/10, 16:14
"Volgens RTV Oost is de stroomstoring veroorzaakt door een onderhoudsmonteur die op een verkeerde knop drukte."
http://www.ispam.nl/archives/17476/equinix-enschede-getroffen-door-stroomstoring/
MediaServe
24/06/10, 16:28
De UPS werd uitgezet in plaats van bypass ;)
Het kan de beste gebeuren :)
Volgende keer zal er wel een collega en een DC engineer naast de monteur staan.
Alleen waarom gaat zowel de A als B feed plat bij het uitzetten een UPS?
Alleen waarom gaat zowel de A als B feed plat bij het uitzetten een UPS?
Omdat het waarschijnlijk zoals eerder vermeld om een A1 + A2 zal gaan ipv A + B. Ik ben ook van mening dat men pas van een A + B kan spreken als alles gescheiden is zelf de hoogspaningskabine en dan nog liefst 2 verschillende leveranciers. Of je de 2 gescheiden netten dan alle 2 op een ups zet laat ik nog in het midden, een no-break (A feed) + break (B feed) is ook al goed.
Omdat het waarschijnlijk zoals eerder vermeld om een A1 + A2 zal gaan ipv A + B. Ik ben ook van mening dat men pas van een A + B kan spreken als alles gescheiden is zelf de hoogspaningskabine en dan nog liefst 2 verschillende leveranciers. Of je de 2 gescheiden netten dan alle 2 op een ups zet laat ik nog in het midden, een no-break (A feed) + break (B feed) is ook al goed.
Was het in NL niet verboden om in 1 gebouw 2 verschillende spanningsbronnen dus van 2 verschillende leveranciers binnen te laten komen? Ik dacht ooit zoiets gelezen te hebben ivm. brandveiligheid oid.
dennis0162
25/06/10, 00:42
Volgens mij niet ivm de brandveiligheid. Dat lijkt me sterk, staan ook een hoop accus binnen etc.
1 aansluiting per huisnr geloof ik. Geen idee hoe dat zit met een eigen trafo.
SebastiaanStok
27/06/10, 13:22
Meerdere aansluiten is geen probleem, maar twee compleet van elkaar gescheiden aansluitingen op het hoofdnet (dus de hoogspanning) dat lijkt me wel erg ver gaan :)
Alle stroomnetwerken in Nederland staan in grote lijnen op elkaar aangesloten ( http://nl.wikipedia.org/wiki/Bestand:Energie-public-600b.png ), dus een aparte lijn zal moeilijk worden.
Als de hoofd aanvoer van de provincie uitvalt heb je toch een probleem (Brabant een paar jaar geleden, met die helikopter crash bijv.).
Daarom gebruiken DC's ook noodstroom aggregaten.
En voor de mensen die nu gaan vragen waarom we dan niet één grote centrale hebben, dat heeft te maken met vermogensverlies (en spreiding van de risico's) :) hoe groter de afstand meer verlies je hebt op de massa. Daarom staat er in vrijwel elke provincie te minste één energie centrale, dat ze op elkaar staan aangesloten is alleen om de belasting te verdelen bij piek momenten.
Uiteraard is het allemaal iets ingewikkelder, maar dit is de makkelijkste uitleg ;)
Meerdere aansluiten is geen probleem, maar twee compleet van elkaar gescheiden aansluitingen op het hoofdnet (dus de hoogspanning) dat lijkt me wel erg ver gaan :)
Twee gescheiden aansluitingen wil zeggen 2 trafo's. Daarmee sluit je weer een risico (uitval van de trafo zelf) uit. Of het de kosten waard is, hangt voornamelijk van de grootte van het datacentrum en de prijsstelling.
Als je het mij vraagt is 1 feed via datacenter UPS en 1 feed direct op het stroomnet, al goed genoeg. Het is dan wel sterk aan te raden om op de directe feed zelf een UPS aan te sluiten, om de achterliggende apparatuur te beschermen van pieken en dips.