Hm, ik was hier al een beetje bang voor. Er kwam vlak na mijn laatste post nog een RFO binnen vanuit OP/JT. Kort gezegd: "we hebben de logs bekeken, konden niets vinden, vendor weet het ook niet, geen idee, waarschijnlijk een corrupt proces ergens, we houden het in de gaten". Wij draaien al de hele dag met alle sessies naar NKF disabled, dacht de kat maar even uit de boom te kijken. Via TC2 overigens geen onderbrekingen gezien, dus die kun je laten draaien @WeServIT ...
Inmiddels werkt het weer, onze outagevwas een paar minuten
Teveel afhankelijkheden en met alleen TC2 aan loopt nog e.e.a. dood (gisteren iig wel). Hier staat alles weer uit.Citaat:
Oorspronkelijk geplaatst door Cybafish
Ik mag hopen dat er vandaag wel een kleine escalatie meeting staat gepland
Sent from my iPhone using webhostingtalk mobile app
Ze gaan vannacht de complete router vervangen. Hopelijk lost dit het probleem op. Hier staat Openpeering sinds gisteravond al niet meer aan.Citaat:
Oorspronkelijk geplaatst door Bart L
Goed om te horen, alleen hoop ik ook dat er een test periode e.d. wordt ingezet. Anders heb ik liever dat ze even 2-3 dagen op 1 router draaien ;)
Hier de notificaties voor vanavond maar even uitgeschakeld ;)
JT transit gewoon uitschakelen tijdens het onderhoud lijkt mij het beste.
Verzonden vanaf mijn iPhone met behulp van webhostingtalk
En, iemand al status gehad hoe het gegaan is?
Sent from my iPhone using webhostingtalk mobile app
Ja. Succesvol.
Verzonden vanaf mijn iPhone
Dat wil overigens niet zeggen dat het probleem daarmee opgelost is, het vervangen van de hele router is puur omdat ze de daadwerkelijke bron van het probleem niet konden vinden. Als ze bvb dezelfde firmware versie draaien kan het heel goed zijn dat het probleem zeer binnenkort weer terug isCitaat:
Oorspronkelijk geplaatst door CharlieRoot
Dit zou niet voor moeten mogen komen op zo'n 'vitaal knooppuntje'.
Hier gaat wel een kopje voor rollen.
Zo te zien hebben toch nog veel Openpeering klanten de sessie(s) uitstaan, aangezien voordat de storingen begonnen het verkeer op ~120Gbit/s zat en nu is dat ~88Gbit/s.
Gisteravond was het verkeer in de piekuren al aanzienlijk lager, dus misschien is het gisteravond daarom wel goed gegaan. Over een paar dagen zal het verkeer wel weer op het orginele niveau zitten en dan zullen we zien of het probleem opgelost is of niet.
Kopje rollen weet ik niet, wat aanpassing op beleid mag toch wel hopen
Sent from my iPhone using webhostingtalk mobile app
Wat hebben ze beleidsmatig dan fout gedaan ?Citaat:
Oorspronkelijk geplaatst door Bart L
Gezien vanaf de buitenkant kom ik alleen op :
1 - router raakt zomaar ineens 'in de war'
2 - oorzaak niet gevonden, maar opgelost na reload
3 - het gebeurt nog eens
4 - hardware vervangen
Aangenomen dat er niet al tijden lang verdachte logmeldingen door de probleemrouter werden gegenereerd of een change eraan te relateren is zie ik geen beleidsmatige fout, en (@Rik) dus ook echt geen kop rollen.
Dit is het type probleem waar een redundante router _niet_ voor helpt.