Juniper bug treft Level3, TATA, Time warner, Easynet, Research in Motion en meer

[Stewie]

Door een bug in bepaalde Juniper MX router firmwares is gistermiddag een groot deel van de Level3 ip transit backbone uitgevallen:

http://www.theregister.co.uk/2011/11...al_net_outage/
http://www.zdnet.co.uk/blogs/mapping...ages-10024743/


Internet services throughout the North America and Europe saw widespread outages and slowdowns on Monday after backbone provider Level 3 Communications suffered a global failure, network providers said.
Time Warner Cable in the US, Research in Motion services for BlackBerry subscribers, and UK ISPs Eclipse Internet, Easynet, and MerulaSupport were all reportedly experiencing problems on Monday. According to multiple accounts, including a variety of Twitter dispatches, at least some of the the outages were the result of a bug in Juniper routers that corrupted BGP, or border gateway protocol, tables.





“There are confirmed reports that this event within Level 3 has affected most of North America,” hosting provider Phyber Communications told its customers in a status report. “This outage has affected other networks running Juniper routers with the majority of them seeing their devices core dump and reload.”

A core dump is when a serious error causes a device to crash and the contents in its main memory are written to disk. As a result, the routers must reboot with little or no warning, creating problems for networks that rely on the devices to route email, webpages and other internet traffic.
“Shortly after 9 a.m. ET today, our network experienced temporary service interruptions across North America and Europe apparently due to a router software issue," Level 3 said in a statement emailed to reporters. "It has been reported that a similar issue may have affected other carriers as well. Our technicians worked quickly to address the issue and service is now fully restored.”
In a separate statement, Juniper Executive Vice President Mark Bauhaus said: "This morning, Juniper learned of a Border Gateway Protocol edge router issue that affected a small percentage of customers. A software fix is available, and we've been working with our customers to immediately deploy the fix."

[Stewie]

Op het Level3 IP transit netwerk vlogen de meeste BGP sessies eruit. Grote impact wereldwijd gedurende 5 minuten, websites waren onbereikbaar en partijen als Microsoft ondervonden problemen.

[Stewie]

Een van de grootste wereldwijde internetstoringen van de laatste tijd en niemand die het heeft gemerkt?

[Domenico]

Haha nee Stijn zoals gisteren al gezegd heb ik daar helemaal niets van gemerkt.

Maar ben eerlijk, de levens van de meeste mensen gaat wel gewoon verder, ook na 5 minuten internetloos te zijn.
Uptime is erg belangrijk maar zoals je ziet voor de meesten ook niet zo heel erg belangrijk.

[Wido]

Is wellicht grappig, maar ik kan er nooit zo wakker van liggen als mijn internet niet werkt. Het is vervelend, maar dan ga ik ff wat anders doen. Lijkt wel juist nu ik zelf in de IT werk er veel minder problemen mee heb als het niet werkt.

Zelf heb ik ook niets gemerkt van deze storing.

[Domenico]

Precies Wido ik heb precies hetzelfde.

Natuurlijk is het vervelend als je net online bezig bent en bijvoorbeeld aan het upload ed maar f*ck als het niet werkt dan ga je gewoon even wat anders doen. Wij weten wat er mis kan zijn en gaan er ook vanuit dat het opgemerkt en er aan gewerkt word.

[Stewie]

Bij een website is het wellicht anders, maar bij systemen waar miljoenen mensen gelijktijdig realtime data uitwisselen werkt het toch anders. En bij gamers helemaal, daar is 1 seconde down al erg. Connectie weg, spel gestopt, punten kwijt. Zo had deze storing grote gevolgen bij Microsoft en Sony. De statistieken laten dan zien dat 30% van de spelers ook direct stopt en het afsluit. Kan je nagaan wat de gevolgen zijn op aankopen op die tijden in de online winkels.

[Wido]

Bij een website is het wellicht anders, maar bij systemen waar miljoenen mensen gelijktijdig realtime data uitwisselen werkt het toch anders. En bij gamers helemaal, daar is 1 seconde down al erg. Connectie weg, spel gestopt, punten kwijt. Zo had deze storing grote gevolgen bij Microsoft en Sony. De statistieken laten dan zien dat 30% van de spelers ook direct stopt en het afsluit. Kan je nagaan wat de gevolgen zijn op aankopen op die tijden in de online winkels.

Ja, maar dat zijn gamers

Maar ook die online shops, denk je niet dat die aankoop later alsnog terug komt? Ik denk het wel.

[PimEffting]

Aankomende nacht even onze Juniper MX80 upgraden...
We gingen er inderdaad ook een paar minuten uit
Gelukkig laadt de MX80 een full table zeer snel waardoor de impact beperkt is gebleven.

[Stewie]

Ja, maar dat zijn gamers

Maar ook die online shops, denk je niet dat die aankoop later alsnog terug komt? Ik denk het wel.

Ik denk op de grote getallen dat er een omzetdaling is. Niet voor niets willen webshops 100% uptime. Als jij met een impulsaankoop bezig bent en je kan de bestelling niet afronden, dan klik je toch even naar Bol, Amazon of een ander?

[Yourwebhoster]

Ja, maar dat zijn gamers

Maar ook die online shops, denk je niet dat die aankoop later alsnog terug komt? Ik denk het wel.

tenzij ik de shop het gun zou ik dit bij nieuwe shops niet zo snel doen, dan zoek ik wel verder

[Apoc]

Ik denk op de grote getallen dat er een omzetdaling is. Niet voor niets willen webshops 100% uptime. Als jij met een impulsaankoop bezig bent en je kan de bestelling niet afronden, dan klik je toch even naar Bol, Amazon of een ander?

Klopt, maar als de helft van het internet er uit ligt, dan zijn die evengoed niet bereikbaar (en laat je de computer waarschijnlijk gewoon even met rust, en tegen de tijd dat je kop koffie op is, doet alles het weer en maak je de bestelling af).

[drex]

Klopt, maar als de helft van het internet er uit ligt, dan zijn die evengoed niet bereikbaar (en laat je de computer waarschijnlijk gewoon even met rust, en tegen de tijd dat je kop koffie op is, doet alles het weer en maak je de bestelling af).

Nu het halve internet is wel een tikkeltje overdreven :-)) en daarbij blijf ik echt niet wachten en probeer het elders.

[Yourwebhoster]

Klopt, maar als de helft van het internet er uit ligt, dan zijn die evengoed niet bereikbaar (en laat je de computer waarschijnlijk gewoon even met rust, en tegen de tijd dat je kop koffie op is, doet alles het weer en maak je de bestelling af).

Dat weet je niet, als het net even over een andere transit/peering loopt.... Hier gaat bol.com bijvb via telia en atom86, en amazon via Level 3 (upc overigens). Daar gaat je theorie

[Apoc]

Nu het halve internet is wel een tikkeltje overdreven :-))

Als je bedenkt hoe groot partijen als Level3 en Tata zijn, en de problemen niet enkel tot die partijen beperkt waren, dan denk ik dat je een eind in de richting komt.

Wat ik probeerde te zeggen is dat wanneer toch een aanzienlijk deel van het internet onbereikbaar is voor een consument, die consument op dat moment vrij snel zal accepteren dat 'zijn internet' het niet doet en dus niet zijn bestelling bij een consument zal plaatsen maar waarschijnlijker op een later tijdstip terug komt. Wanneer enkel 1 webshop eruit ligt, is dat natuurlijk een heel ander verhaal.