Bekijk Volledige Versie : Netrouting down
AndriesLouw
10/02/11, 18:36
Sinds 17:25, problemen met de routing? Geen enkele site binnen het hele AS is nog bereikbaar.
hier helaas ook last van...
rensariens
10/02/11, 18:38
Klopt, ziet er uit als een router die onderuit is gegaan, nog geen reactie ontvangen van Netrouting (zullen er ongetwijfeld mee bezig zijn).
AndriesLouw
10/02/11, 18:40
Vervelende is dat de ticketing, NOC pagina, en de e-mail ook gelijk plat ligt. Even afwachten of er misschien iets via de Twitter (http://twitter.com/Netrouting) binnen komt..
ping www.netrouting.eu
Ping-aanvraag kan host www.netrouting.eu niet vinden.
Controleer de naam en probeer het opnieuw.
DNS in zelfde lokatie?
AndriesLouw
10/02/11, 18:41
@Stewie:
Correct, DNS-servers voor netrouting.eu staan in zijn eigen AS, al geloof ik dat hij er voorheen wel een of meerdere buiten het eigen AS had staan.
http://monitoring.myh2oservers.com/smokeping/smokeping.cgi?target=Europe.Netherlands.WeServITNe trouting
Ik heb zojuist contact gehad met Savvas. Hij is op de hoogte en is er mee bezig!
AndriesLouw
10/02/11, 18:46
Prima, wachten we af, zou je, als je meer te weten komt over wat en wanneer het opgelost is, het willen plaatsen WeServIT?
Prima, wachten we af, zou je, als je meer te weten komt over wat en wanneer het opgelost is, het willen plaatsen WeServIT?
Natuurlijk. Zodra ik wat meer te weten kom, dan zal ik het direct posten!
Ellendig dit :( Hopelijk wordt het spoedig opgelost!
digitalvibes
10/02/11, 18:50
Niet te vaak bellen ;) laat hem eerst het probleem verhelpen.
Ik heb zojuist contact gehad met Savvas. Hij is op de hoogte en is er mee bezig!
ok dan kunnen we niets anders doen dan wachten.
Uhm, voor de duidelijkheid, ik hoor niet bij Netrouting dus kom aub niet op onze live support om te vragen waarom je server offline is :p
Het is helaas wel erg vaak feest bij Netrouting...
Is nu toch al een tijdje geleden dat er nog problemen waren?
Namens Netrouting kan ik de volgende update plaatsen: Het lijkt erop dat er problemen zijn met een blade / modules welke verantwoordelijk zijn voor transport naar Alphen aan den Rijn. Andere locaties zijn gewoon online, enkel Alphen aan den Rijn heeft problemen.
Op dit moment zijn ze hard aan ze met al hun mankracht aan het werk om het zo snel mogelijk online te krijgen.
Hebben ze het daar niet redundant draaien dan?
Ik dacht van wel?
Dan kunnen ze toch 1 router uitgooien en alles over de tweede laten lopen?
AndriesLouw
10/02/11, 19:08
@bitbull: Niet om te verdedigen, maar het ging de laatste tijd redelijk, in afgelopen half jaar is er een blade van een router down gegaan door oververhitting, en wat route problemen richting bepaalde netwerken. Het netwerk is hard gegroeid in de laatste jaren.
AndriesLouw
10/02/11, 19:09
@ServerBoost: In Alphen staat er voorzover ik voor de laatste keer zag maar 1 grote, en als je fysiek geen andere voorhanden hebt, kun je de kabels ook niet ompluggen richting de switches.
Yourwebhoster
10/02/11, 19:10
Hebben ze het daar niet redundant draaien dan?
Ik dacht van wel?
Dan kunnen ze toch 1 router uitgooien en alles over de tweede laten lopen?
sinds de verhuizing naar een eigen room is het netwerk niet redundant meer. En dat is al ruim een jaar geleden, daarom had iedereen last van de ene router die down was. Ze werken er wel aan om het redundant te krijgen, maar maak dan niet de move naar een eigen cage.
Heren, laten we even afwachten tot dat er een officiële oorzaak bekend is. In Alphen staan meerdere routers, 3 om precies te zijn. Er is genoeg hardware op kantoor, dit is het probleem gelukkig niet.
In de praktijk merken we er anders niks aan... Verder hier op in gaan zal ik niet, ik weet dat hier aan gewerkt wordt alleen het blijft gek dat het zolang duurt.
Van welk type router hebben ze maar één? Anders even rondbellen, zijn voldoende mensen op WHT die een spare hebben en hun willen helpen om weer snel online te komen!
Heren, laten we even afwachten tot dat er een officiële oorzaak bekend is. Na deze storing kunnen jullie persoonlijk contact opnemen met Netrouting. Voor de duidelijkheid; in Alphen staan meerdere routers, 3 om precies te zijn. Er is genoeg hardware op kantoor, dit is het probleem gelukkig niet.
Yourwebhoster
10/02/11, 19:11
@ServerBoost: In Alphen staat er voorzover ik voor de laatste keer zag maar 1 grote, en als je fysiek geen andere voorhanden hebt, kun je de kabels ook niet ompluggen richting de switches.
Zover ik te horen gekregen heb staat in POP1 een router en in POP2.
AndriesLouw
10/02/11, 19:13
Zover ik te horen gekregen heb staat in POP1 een router en in POP2.
Ik dacht dat er nog een POP was, maar kan me vergissen. Weet zo ook niet of het in een ring opstelling draait.
rensariens
10/02/11, 19:14
Er staan stapels routers in Alphen (3 + spares minimaal), komt goed. Het is sinds kort mogelijk om een redundante verbinding te krijgen met VRRP.
Yourwebhoster
10/02/11, 19:14
Ik dacht dat er nog een POP was, maar kan me vergissen. Weet zo ook niet of het in een ring opstelling draait.
Je hebt POP1 waar alles vroeger zat en POP2 waar Netrouting haar eigen "cage" heeft. POP3 was even geleden nog niet ingebruik in Datahouse door wie dan ook, maar dat durf ik niet zeker te zeggen.
AndriesLouw
10/02/11, 19:15
POP's volgens as47869.net (Google Cache):
TelecityRedbus2, AMS
Alphen DC, ALP
InterXion 2, FRA
Als er 3+ routers staan is het toch een kwestie van ompluggen en weer gaan? En een blade wisselen zal toch ook niet erg veel tijd in beslag nemen lijkt me?
Yourwebhoster
10/02/11, 19:17
POP's volgens as47869.net (Google Cache):
TelecityRedbus2, AMS
Alphen DC, ALP
InterXion 2, FRA
Ik heb het over de rooms in Datahouse Alphen, die heten POP1, POP2 en POP3.:yes:
AndriesLouw
10/02/11, 19:18
Ik heb het over de rooms in Datahouse Alphen, die heten POP1, POP2 en POP3.:yes:
Ah, excuus in dat geval, ikzelf zat vroeger in 1, maar dat is opgedoekt volgens mij, zit nu in de cage in 2.
Yourwebhoster
10/02/11, 19:18
Ah, excuus in dat geval, ikzelf zat vroeger in 1 in dat geval, maar dat is opgedoekt volgens mij, zit nu in de cage in 2.
Klopt, pop1 is vorig jaar verhuisd (bijna jaar geleden, exacte datum heb ik even niet).
Namens Netrouting kan ik de volgende update plaatsen: Het lijkt erop dat er problemen zijn met een blade / modules welke verantwoordelijk zijn voor transport naar Alphen aan den Rijn. Andere locaties zijn gewoon online, enkel Alphen aan den Rijn heeft problemen.
Op dit moment zijn ze hard aan ze met al hun mankracht aan het werk om het zo snel mogelijk online te krijgen.
Ik kan het bericht va WeServIT bevestigen,
Er is een storing in het datacircuit van locatie Alphen aan den Rijn.
Wij zijn druk bezig dit probleem te verhelpen.
Zodra er meer bekent is zal ik hiervan een mededeling doen.
Robin Gould
-Netrouting
T. Verhaeg
10/02/11, 19:19
Er staan stapels routers in Alphen (3 + spares minimaal), komt goed. Het is sinds kort mogelijk om een redundante verbinding te krijgen met VRRP.
Dat had eigenlijk al zo moeten zijn, maargoed. Sterke aan diegene die offline zijn.
@AndriesLouw: Laatste storing was op 23 november. Dus het ging 2 maanden goed. Afijn.. we wachten het maar weer af voor nu.
AndriesLouw
10/02/11, 19:20
Klopt, pop1 is vorig jaar verhuisd (bijna jaar geleden, exacte datum heb ik even niet).
Ben zelf 20 oktober 2010 verhuisd, werd verteld dat we de laatsten waren.
Speculeren heeft weinig zijn. Savvas is zelf slim genoeg om de snelste oplossing te vinden. Als het een kwestie was van ompluggen, dan was dat waarschijnlijk al gebeurd.
Het probleem is als getraceerd naar de desbetreffende apparatuur en we zijn bezig dit probleem te verhelpen.
Robin Gould
-Netrouting
Het is weer online heren! Zodra alles stabiel is zal Savvas een mailing de deur uit doen.
rensariens
10/02/11, 19:31
Yes, up :)
AndriesLouw
10/02/11, 19:32
Kan ik bevestigen, is het aan mij om dit topic te sluiten (als ik dat kan überhaupt), of wachten we een reactie van Savvas af?
Totale downtime: 1 uur 6 minuten. Begonnen om 17:25, geëindigd om 18:31.
Yourwebhoster
10/02/11, 19:33
Kan ik bevestigen, is het aan mij om dit topic te sluiten (als ik dat kan überhaupt), of wachten we een reactie van Savvas af?
De mods kunnen dat eventueel bepalen, maar Netrouting kan altijd een verklaring via de mods neerzetten.
AndriesLouw
10/02/11, 19:34
De mods kunnen dat eventueel bepalen, maar Netrouting kan altijd een verklaring via de mods neerzetten.
Prima, dan pak ik in, en ga naar huis :) Prettige avond allen!
Het probleem is reeds verholpen na een hard reload op CR2 (een remote soft reload voldeed niet)
De storing heeft zich enkel voorgedaan in een gedeelte van locatie Alphen aan den Rijn. (locaties Amsterdam en Frankfurt hebben geen last van de storing ondervonden)
Daarnaast zullen alle klanten die nog geen redundante uplink bij ons hebben deze toegewezen krijgen in de komende dagen.
Onze welgemeende excuses voor het ongemak.
Robin Gould
-Netrouting
Mag ik mij afvragen waarom VRRP het niet deed? Zo moeilijk kan dat nu ook weer niet zijn om dat goed te configureren ...
(nee geen klant meer, enkel nieuwschierig gezien een hele tijd terug VRRP geconfigureerd zou worden)
rensariens
10/02/11, 19:47
Mag ik mij afvragen waarom VRRP het niet deed? Zo moeilijk kan dat nu ook weer niet zijn om dat goed te configureren ...
(nee geen klant meer, enkel nieuwschierig gezien een hele tijd terug VRRP geconfigureerd zou worden)
Nog niemand heeft de VRRP uplink.
T. Verhaeg
10/02/11, 19:48
Mag ik mij afvragen waarom VRRP het niet deed? Zo moeilijk kan dat nu ook weer niet zijn om dat goed te configureren ...
(nee geen klant meer, enkel nieuwschierig gezien een hele tijd terug VRRP geconfigureerd zou worden)
Het is ook niet super bijzonder, wel een vereiste voor een netwerk met de omvang van Netrouting als je het mij vraagt. Alles is weer up, als ik het goed begrijp?
Nog niemand heeft de VRRP uplink.
Dat schiet ook niet op inderdaad :X
Erwin Zeeuw
10/02/11, 20:09
Je hebt POP1 waar alles vroeger zat en POP2 waar Netrouting haar eigen "cage" heeft. POP3 was even geleden nog niet ingebruik in Datahouse door wie dan ook, maar dat durf ik niet zeker te zeggen.
POP3 bestaat nog niet in Alphen, POP1 en POP2 inderdaad wel :)
Gelukkig is alles weer up!
Redservers
10/02/11, 20:17
Gelukkig is het probleem snel verholpen, goed dat ze weer online zijn.
hier nog steeds offline.
Ik denk dat je het beste direct contact kunt opnemen met je contactpersoon. Indien je klant bent bij Netrouting kun je dit doen door middel van hun ticket systeem, er zijn 3 mensen op locatie, en ik weet zeker dat ze er snel naar kunnen kijken. Mocht je klant zijn van een andere partij, dan zul je contact op te nemen met hun.
AndriesLouw
10/02/11, 20:35
hier nog steeds offline.
Het netwerk werkt prima, neem anders even contact op met je hoster, of omschrijf je probleem iets duidelijker, wellicht kunnen we helpen.
AndriesLouw
12/02/11, 01:40
Voor hen die vanavond en/of vannacht wederom problemen hadden, dat klopt, sinds 23:30 is het netwerk niet altijd even stabiel.
Officiële statement van 00:02 luid:
We are currently experiencing network issues in our Alphen a/d Rijn datacenter. Services effected are dedicated servers, vps and colocation.
Your connection should be available, however minor minute drops may still occur.
Our sincere apologies for the inconvenience. We're doing everything we can to stabilize connectivity as soon as possible.
We will release an update as more information becomes available.
Ligt het aan mij of zijn er weer connectie problemen?
Yourwebhoster
14/02/11, 02:17
Ligt het aan mij of zijn er weer connectie problemen?
Netrouting is bezig hiermee, er zijn inderdaad problemen.
Edit: Hier lijkt het opgelost.
Netrouting is bezig hiermee, er zijn inderdaad problemen.
Edit: Hier lijkt het opgelost.
Wij hebben op verzoek van de klant een paar vlans omgegooid naar een andere router. Een van de vlans werd niet direct goed doorgezet, vandaar de onderbreking bij jullie.
Vragen gewoon netjes aan de helpdesk richten, we zijn bereikbaar.
Het spreekt natuurlijk voor zich dat de ontwikkelingen van afgelopen dagen ons zeer betreuren. Er volgt nog een uitgebreide mail waarin het een en ander wordt toegelicht, met de nodige wijzigingen die daar aan te gevolgen zijn gemaakt.
Yourwebhoster
14/02/11, 22:10
Vragen gewoon netjes aan de helpdesk richten, we zijn bereikbaar. .
Heb ik ook gedaan, beantwoord alleen de vraag hier aangezien deze onbeantwoord was.