PDA

Bekijk Volledige Versie : Storing Serverius DC1+DC2



Boskoop
28/06/16, 11:30
http://noc.serverius.net/?p=138



You are receiving this message as notice, which has impact on the network service provided to you by Serverius:
Location = Network outage
Service Type = unknown

Start: 09:30 28.06.2016
End: –
Duration: –
Location: DC1 and/or DC2
Reason: Unknown.
Impact: Packetloss

We apologize in advance for any inconvenience this might cause. When there will be news we will inform you here.

Serverius NOC team


Wat ik vanuit hier kan zien:
Vanuit sommige netwerken 100% packet loss
vanuit andere netwerken +/-50% packet loss

Skredd
28/06/16, 11:47
Lijkt weer stabiel.
Wel heel benieuwd naar de oorzaak...

Boskoop
28/06/16, 11:52
Lijkt weer stabiel.
Wel heel benieuwd naar de oorzaak...

Yep, vanuit hier ook weer stabiel, even wachten op het antwoord over de oorzaak. Serverius is altijd open over dit soort dingen dus dat komt wel goed :)

Skredd
28/06/16, 12:41
Dit is de verklaring die gegeven wordt


The cause found: a global (national) error at the Amsterdam Internet Exchange, AMS-IX. All AMS-IX members are effected. The two AMS-IX route servers RS1 and RS2 where continuously sending us incorrect malformed AS_PATH BGP information. This caused our Cisco routers BGP false route information that led to other BGP routes from other carriers to problems. After this problem was found we disconnected the AMS-IX BGP session and contacted the AMS-IX NOC. They told us the still have the problems and they sent out this message to all AMS-IX members:
—————————————————————————–
Subject: Unscheduled downtime of BGP sessions to RS1 and RS2
Status: open
Opened: 2016-06-28 10:10:31 +0200
Type: scheduled
Scope: AMS-IX NL
Start: 2016-06-28 07:00:00 +0200
Start (RemoteTime): 2016-06-28 07:00:00 +0200

DESCRIPTION:

We are currently seeing a lot of malformed AS_PATH errors on RS1 and RS2, causing BGP sessions to fail.

AMS-IX NOC is troubleshooting this issue and will send updates as soon as we have any news.

tech-l mailing list
tech-l@ams-ix.net
https://lists.ams-ix.net/mailman/listinfo/tech-l
—————————————————————————–
Until the AMS-IX solved the problem we will leave the uplinks disconnected. If there is any news, we will update you here.

Skredd
28/06/16, 13:10
Lijkt inderdaad een probleem te zijn geweest op AMS-IX route servers: https://ams-ix.net/technical/statistics/route-server-stats
Ik vraag me af of dit een kwestie was van filtering?

T. Verhaeg
28/06/16, 15:47
Een van de aangesloten partijen op AMS-IX heeft een /22 met een ongeldige AS-SET naar de route servers (en peers) geadverteerd. Voor sommige hardware, waaronder de route servers op AMS-IX en blijkbaar de routers van Serverius (Cisco) leverde dit problemen op wat resulteerde in issues met BGP sessies op AMS-IX.

visser
28/06/16, 16:49
Lijkt inderdaad een probleem te zijn geweest op AMS-IX route servers: https://ams-ix.net/technical/statistics/route-server-stats
Ik vraag me af of dit een kwestie was van filtering?

De formulering van het geposte ticket sluit dat uit.

malformed suggereert wel heel sterk dat er technisch incorrecte attributen geadverteerd werden , in plaats van valide paden waarvan de inhoud onbedoeld en onjuist is . (zoals het adverteren van alle routes) .

De BGP RFC zegt om de sessie met de peer die malformed data stuurt te verbreken . Maar als het probleem zich niet oplost ( of sommige peers dat niet doen maar de malformed attributen wel doorsturen ) kun je een hele serie van klapperende sessies krijgen.