Onderwerp: Websites Telfort en Rijksoverheid offline door storing bij Prolocation - Update

Door Joost Schellevis, dinsdag 10 februari 2015 11:56, 47 reacties, 8.542 views • Feedback
Door een storing bij netwerk- en hostingprovider Prolocation zijn meerdere grote websites, waaronder die van de Rijksoverheid, GeenStijl en Telfort, offline. Het is onduidelijk wat de oorzaak van de storing precies is.

Source: tweakers.net

Prolocation heeft veel grote klanten, waaronder GeenStijl, zustersite Dumpert, de Rijksoverheid en Telfort. Die zijn tot nog toe allemaal offline. al meldt Platform IQ dat advertentieservers weer online komen. Ook Domeinbalie meldt weer online te zijn. Andere klanten, zoals de Universiteit van Amsterdam en Centric, lijken geen last te hebben gehad van het probleem bij Prolocation.

Is het al duidelijk of het een fiber kabel is? Succes met het fixen Prolocation!

Oorspronkelijk geplaatst door Domenico

Is het al duidelijk of het een fiber kabel is? Succes met het fixen Prolocation!

Dat gerucht gaat maar is nog niet bevestigd. Ik merk ook dat quickservers down is. Daar valt te lezen:
http://mihosnetnoc.com/status.php?id=111

Momenteel ervaren we een netwerk storing. Het oplossen van dit probleem heeft onze hoogste prioriteit.

Update 12.00 uur: de verbinding is weggevallen tussen ons netwerk en onze dataleverancier. Het is vooralsnog niet duidelijk waar het precies fout gaat. Momenteel is er een engineer onderweg om probleem op locatie te onderzoeken. Update volgt binnen 30 minuten.

De urgentie is ons bekend. We houden u via deze pagina op de hoogte.

Update 12.50 uur: problemen aan onze kant lijken uitgesloten. Vooralsnog lijkt er zich een kabelbreuk voor te doen binnen het datacentrum waar het netwerk is aangesloten. Er zijn engineers van onze netwerkleverancier onsite.

Mijn connectivity met een VPS voor fallback mail viel daar net na 11.45 weg.

Geen idee in welk DC quickservers/Mihosnet zit, mss is het gerelateerd, alhoewel geenstijl etc er al langer uit liggen

Platform IQ was wat voorbarig met de gestelde conclusie:

Update, 13.13: Platform IQ meldt te vroeg over de oorzaak gespeculeerd te hebben. De oorzaak is nog onbekend.Ook kampt het advertentienetwerk nog steeds met een storing.

Ik hoop voor alle betrokken partijen dat het probleem snel gevonden is.

Updates mihosnet:


Update 12.50 uur: problemen aan onze kant lijken uitgesloten. Vooralsnog lijkt er zich een kabelbreuk voor te doen binnen het datacentrum waar het netwerk is aangesloten. Er zijn engineers van onze netwerkleverancier onsite.

Update 13.30 uur: alles wijst op een kabelbreuk binnen Telecity2. Er wordt hard gewerkt om de verbinding spoedig terug online te krijgen. Engineers van Telecity zijn inmiddels ook onsite.

Hoe is het mogelijk dat een kabelbreuk zo veel downtime veroorzaakt? Iets met redundancy en 2015?

nota bene, ik update even wat ik bij Mihosnet van hun NOC afhaal, ik weet niet of er een relatie is met Rijksoverheid, GeenStijl en Telfort.

Oorspronkelijk geplaatst door Ramon Fincken

nota bene, ik update even wat ik bij Mihosnet van hun NOC afhaal, ik weet niet of er een relatie is met Rijksoverheid, GeenStijl en Telfort.

traceroute to telfort.nl (81.173.34.237), 30 hops max, 60 byte packets
1 v15-if0.cr2.eun.wipabv.net (171.25.179.126) 0.185 ms 0.166 ms 0.133 ms
2 wipa.nikhef.openpeering.nl (82.150.159.33) 5.687 ms 5.683 ms 5.670 ms
3 openpeering.prolocation.net (82.150.158.187) 2.414 ms 2.411 ms 2.352 ms^C

en
traceroute to rijksoverheid.nl (178.22.85.11), 30 hops max, 60 byte packets
1 v15-if0.cr2.eun.wipabv.net (171.25.179.126) 0.158 ms 0.142 ms 0.129 ms
2 wipa.telecity2.openpeering.nl (82.150.159.34) 0.736 ms 0.821 ms 1.016 ms
3 openpeering.prolocation.net (82.150.158.187) 0.737 ms 0.798 ms 0.890 ms^C

http://storingsoverzicht.nl/2015/ove...on-datacenter/

Storingsoverzicht meld: (Bron onbekend/niet genoemd)

Update 14:12 uur

De storing duurt voort. Er wordt nu gesuggereerd dat het toch niet aan een glasvezelbreak ligt. Waar het wel aan ligt? Dat is een vraag waar nog werkelijk niemand antwoord op lijkt te hebben, naast het feit dat de communicatie vrijwel nog steeds 0 is vanuit de getroffen hosting partij. Wederom kunnen we hierdoor geen mogelijke oplostijd melden.

Code:

 2. fiberring.evoswitch.nl-ix.net                                                                                                    0.0%   2.4   2.5   2.4   2.6   0.1
 3. 87.255.35.84                                                                                                                     0.0%   3.3   3.3   3.3   3.3   0.0
 4. fiberring.alm.mihos.net                                                                                                          0.0%   3.6   3.6   3.5   3.6   0.1
 5. server.quickservers.com                                                                                                          0.0%   3.5   3.5   3.5   3.6   0.0

quickservers / mihoshnet is weer bereikbaar, lijkt erop alsof er 2 storingen tegelijkertijd waren. Ik vermoed dat deze los staat van prolocation, maar het kan natuurlijk zijn dat ze het verkeer via een andere weg omleiden

Oorspronkelijk geplaatst door Boskoop

Code:

 2. fiberring.evoswitch.nl-ix.net                                                                                                    0.0%   2.4   2.5   2.4   2.6   0.1
 3. 87.255.35.84                                                                                                                     0.0%   3.3   3.3   3.3   3.3   0.0
 4. fiberring.alm.mihos.net                                                                                                          0.0%   3.6   3.6   3.5   3.6   0.1
 5. server.quickservers.com                                                                                                          0.0%   3.5   3.5   3.5   3.6   0.0

quickservers / mihoshnet is weer bereikbaar, lijkt erop alsof er 2 storingen tegelijkertijd waren. Ik vermoed dat deze los staat van prolocation, maar het kan natuurlijk zijn dat ze het verkeer via een andere weg omleiden

Kan natuurlijk een VLAN over de zelfde fiber zijn, of misschien zijn er bij werkzaamheden meerdere kabels geraakt. Blijft gissen.

Oorspronkelijk geplaatst door CharlieRoot

Kan natuurlijk een VLAN over de zelfde fiber zijn, of misschien zijn er bij werkzaamheden meerdere kabels geraakt. Blijft gissen.

Idd,

zie nu op de nocsite van mihosnet staan:

Update 14.20 uur: problemen zijn voor nu opgelost. Uitgebreid verslag volgt spoedig.

zijn voor nu opgelost, .... dat stukje 'voor nu' ... dat impliceert voor mij dat ze alternatieve maatregelen/routes genomen hebben

Oorspronkelijk geplaatst door Boskoop

Idd,

zie nu op de nocsite van mihosnet staan:


zijn voor nu opgelost, .... dat stukje 'voor nu' ... dat impliceert voor mij dat ze alternatieve maatregelen/routes genomen hebben

Op twitter klagen mensen dat de verbindingen even terug kwamen maar nog steeds erg instabiel zijn. Het komt mij meer voor als een DDoS. Ik zie bij verschillende sites dipjes en pieken in het verkeer.

Maar:
"Door de storing zijn de ministeries niet in staat om Kamerstukken te sturen of in te zien, zo weet ANP."
Het heeft ook een positief effect ;-)

Oorspronkelijk geplaatst door CharlieRoot

Op twitter klagen mensen dat de verbindingen even terug kwamen maar nog steeds erg instabiel zijn. Het komt mij meer voor als een DDoS. Ik zie bij verschillende sites dipjes en pieken in het verkeer.

Ze staan er volledig los van geven ze aan

Belangrijk: het is tot onze aandacht gekomen dat er andere provider(s) (waaronder Prolocation) zijn die momenteel ook last hebben van een storing, waardoor sites van de Rijksoverheid en Telfort onbereikbaar zijn. Onze storing is echter rond 14.00 uur opgelost, en houdt geen verband met deze partijen. We nemen dus ook geen diensten af bij Prolocation.

toeval dus

Oorspronkelijk geplaatst door Boskoop

Ze staan er volledig los van geven ze aan

toeval dus

Of ze gebruiken de zelfde fiber