Bekijk Volledige Versie : Algemene stroomstoring Amsterdam
Op dit moment is er een grote stroomstoring in Amsterdam.
Getroffen is in iedergeval het Amsterdam Science park waaronder Nikhef, Sara en TC1.
Onze AMS-IX router staat binnen het Sara datacenter en is op dit moment niet bereikbaar, het verkeer wordt nu afgehandeld door onze backup locatie TC2.
Buiten andere routes en ietwat hogere latency ondervinden wij op dit moment geen hinder.
Wanneer wij nieuws van Sara hebben laten wij dit hier weten.
Lijkt op een gedeeltelijk storing binnen SARA te zijn;
Wij hebben in S150 (AMS-IX ruimte) nog stroom op onze router.
"sh chassis
power supply 1 ok
power supply 2 ok
power supply 1 to 2 from left to right"
Inderdaad geeft de AMS-IX de volgende melding:
Ticket: 21670
Summary: SARA power interruption
Status: OPEN
Opened: 2008-10-04 16:06 +0200
Type: unscheduled
Scope: AMS-IX
Start: 2008-10-04 16:03:09 +0200
End: 2008-10-04 16:03:15 +0200
DESCRIPTION:
Half our power feeds at AMS-IX housing site SARA went away for several seconds.
During this event, the platform continued to forward traffic normally, though judging from ports going down several members at SARA seem to have lost power completely. Most if not all of them have come back.
ACTIONS:
The AMS-IX NOC is investigating.
Onze webserver die in DCG hangt loopt ook ineens via een hele andere route:
1 <1 ms <1 ms <1 ms 192.168.10.1
2 5 ms 6 ms 5 ms 10.193.192.1
3 5 ms 6 ms 5 ms csw2-vlan202.dbsch1.nb.home.nl [213.51.151.193]
4 6 ms 6 ms 7 ms tb-rc0001-cr101-ae5-0.core.as9143.net [213.51.15
8.94]
5 13 ms 27 ms 9 ms bb1-ae1-0.amsix-nikhef.home.nl [213.51.158.18]
6 8 ms 8 ms 7 ms bb2-ae3-0.amsix-telecity.home.nl [213.51.158.4]
7 9 ms 7 ms 8 ms gi4-46.ccr01.ams05.atlas.cogentco.com [130.117.1
4.85]
8 12 ms 9 ms 7 ms te4-4.ccr02.ams03.atlas.cogentco.com [130.117.1.
81]
9 10 ms 9 ms 9 ms te3-1.mpd01.ams03.atlas.cogentco.com [130.117.3.
62]
10 8 ms 8 ms 12 ms te4-1.mpd01.ams04.atlas.cogentco.com [130.117.2.
66]
11 8 ms 8 ms 9 ms 149.6.128.174
12 20 ms 9 ms 9 ms web01.mvr-servers.com [194.107.122.213]
http://monitoring.myh2oservers.com/smokeping/smokeping.cgi?target=Europe.Netherlands
Keek al raar op toen Nagios smsjes begon te sturen over packageloss en hoge pings :)
Ook wij (TransQuality) ondervinden hinder, een aantal uplinks liggen eruit, waardoor er extra druk op de overige uplinks staat. Dit zal geen gevolg moeten hebben voor de klanten, buiten dan een hogere latency.
Het gaat allemaal erg goed de laatste tijd weer. Hopelijk is het snel verholpen, succes met de eventuele problemen.
systemdeveloper
04/10/08, 18:18
http://monitoring.myh2oservers.com/smokeping/smokeping.cgi?target=Europe.Netherlands
Keek al raar op toen Nagios smsjes begon te sturen over packageloss en hoge pings :)
hehe, ik heb net vanacht mijn laatste server uit a'dam laten halen omdat ik ook al de ****** kreeg van nagios :)
De spanning is zojuist hersteld.
Echter is de spanning nog niet geheel gegarandeerd aangezien de UPS fouten geeft.
Er bestaat dus een kans dat er nog wat route changes zullen zijn mocht de boel nogmaals uitvallen.
Qua netwerk verbindingen is bij ons momenteel alles weer hersteld en zal het netwerk de komende minuten weer overschakelen naar normaal bedrijf.
Bij ons loopt ook alles weer volgens de normale routes
Iemand die kan bevestigen of het alleen sara betrof of ook nikhef en/of tc1 ?
Wij hebben er in ieder geval niets van gemerkt (actieve apparatuur op nikhef en met dark fibers naar sara actieve apparatuur)
Iemand die kan bevestigen of het alleen sara betrof of ook nikhef en/of tc1 ?
Wij hebben er in ieder geval niets van gemerkt (actieve apparatuur op nikhef en met dark fibers naar sara actieve apparatuur)
De stroomstoring besloeg een groot deel van Amsterdam-ZuidOost.
Nikhef en TC1 hebben het opgevangen met de UPS systemen echter bij Sara op de begane grond (S043 uit mijn hoofd) is er iets misgegaan waardoor de volledige 230V voorziening wegviel in deze ruimte.
Dit is een grote ruimte waar ook partijen zoals Level3, Surfnet etc. staan dus vandaar ook de dip in de AMS-IX graph, de AMS-IX zelf staat in een andere ruimte op Sara en was niet getroffen.
De stroomstoring besloeg een groot deel van Amsterdam-ZuidOost.
Nikhef en TC1 hebben het opgevangen met de UPS systemen echter bij Sara op de begane grond (S043 uit mijn hoofd) is er iets misgegaan waardoor de volledige 230V voorziening wegviel in deze ruimte.
Dit is een grote ruimte waar ook partijen zoals Level3, Surfnet etc. staan dus vandaar ook de dip in de AMS-IX graph, de AMS-IX zelf staat in een andere ruimte op Sara en was niet getroffen.
Een klant van ons zit in zuidoost, aan de kant van de arena, geen uitval gehad.
't Is Amsterdam Oost (Watergraafsmeer), TC2 ligt in Zuid-Oost. ;)
Het gaat de verkeerde kant uit met al die stroomstoringen de laatste tijd.
Ik zit in euNetworks, en heb gelukkig geen last gehad van power problemen :)
Het gaat de verkeerde kant uit met al die stroomstoringen de laatste tijd.
Ik zit in euNetworks, en heb gelukkig geen last gehad van power problemen :)
Afkloppen :)
Gelukkig wij ook nog nergens last van
http://www.nu.nl/news/1774924/12/Grote_stroomstoring_treft_Amsterdam-Oost.html
SARA zegt er zelf dit over:
On October 4th, approximately between 16:03 hrs and 18:00 hrs, a large area of Amsterdam has suffered from a severe power outage. Unfortunately also Science Park Amsterdam, where one of the SARA Datacenters is located, was confronted with this failure.
The Emergency Power Supply took over the major part of the power delivery, but unfortunately one of our four UPS systems malfunctioned.
As a result some customers experienced a short outage of approximately 6 seconds on one of their two powerfeeds. After the 6 seconds the generators came online and provided full power on all feeds, including the affected one. However, a small number of racks needed a manual reset and was affected longer. The failure had consequences among others for the internet traffic and some other SARA services. At this moment most services are restored.
By now the external power situation is stable and normal again. SARA is investigating the cause of the malfunction of the UPS system. If needed, the generator will preventive be put online and running.
...ze zijn niet de enige met een onwillige UPS deze week lijkt het...
...ze zijn niet de enige met een onwillige UPS deze week lijkt het...
Ze hadden er in ieder geval 3 die het wel deden ;)
Ze hadden er in ieder geval 3 die het wel deden ;)
En ze hebben een generator die aansprong :)
Er mag ook wel even gezegd worden dat NIKHEF & TC1 geen downtime hebben gehad, en de UPS' en generatoren daar dus goed hebben gefunctioneerd.
En ze hebben een generator die aansprong :)
Binnen 6 seconden, heel niet slecht. Nu nog even de UPS fixen en dan is het weer zoals het hoort! T'is ook allemaal niet eenvoudig...
MediaServe
13/10/08, 00:54
Je zou denken dat ze met de prijzen die SARA hanteert, dat ze alles N+N redundant uitvoeren en iedere maand netjes testen. Dit is al de zoveelste keer dat SARA en, omdat het een belangrijk knooppunt is, daarmee ook de rest van het Nederlandse internet problemen heeft.
:thumbdown: