Onderwerp: Glasvezelbreuk zorgt voor netwerkstoring CloudVPS

Het netwerk van CloudVPS is getroffen door een storing. Uit een tweet van CloudVPS blijkt dat de storing is veroorzaakt door graafschade aan een glasvezel bij Equinix. CloudVPS maakt gebruik van datacenters Equinix AM1 en AM4 in Amsterdam.

Source: ispam.nl

Heel vervelend zo een glasvezel storing, maar het laat weer een aantal prutsers zien...
Ik heb 4 'hosters' gezien die hun primary en secondary DNS beide in t zelfde DC van CloudVPS hebben staan...
Leuk dat je dan emailt via Office365, maar email ontvangen zonder MX records gaat niet (dus meteen einde oefening NDR terug) ook email verzenden naar andere gaat vaak mis (een simpele DNS check op de afzender failed natuurlijk ook)

Oorspronkelijk geplaatst door Powermage

Heel vervelend zo een glasvezel storing, maar het laat weer een aantal prutsers zien...
Ik heb 4 'hosters' gezien die hun primary en secondary DNS beide in t zelfde DC van CloudVPS hebben staan...
Leuk dat je dan emailt via Office365, maar email ontvangen zonder MX records gaat niet (dus meteen einde oefening NDR terug) ook email verzenden naar andere gaat vaak mis (een simpele DNS check op de afzender failed natuurlijk ook)

Lijkt mij toch zo vanzelf sprekend je DNS EN in een ander DC EN in een ander netwerk hebben staan..

Oorspronkelijk geplaatst door Smashmint

Lijkt mij toch zo vanzelf sprekend je DNS EN in een ander DC EN in een ander netwerk hebben staan..

Helaas is dat nog steeds niet 100% doorgedrongen bij alle hosters

Oorspronkelijk geplaatst door Smashmint

Lijkt mij toch zo vanzelf sprekend je DNS EN in een ander DC EN in een ander netwerk hebben staan..

En het liefst ook nog in verschillende steden/landen. Er zijn helaas nog te veel partijen die het op 1 server hebben staan, als het op 2 servers/VPSen staat dan gaat het al in de goede richting.

Ach ja... Het gebeurd altijd een ander, toch?


Verzonden vanaf mijn iPhone met behulp van webhostingtalk

Is toch maar een kleine moeite om de dns te spreiden. Neem in het buitenland een simpel vps'je af en vervolgens een simpele mysql replication (in het geval van powerdns). Moet niet zo moeilijk zijn lijkt mij.

Laat die 'hosters' toch lekker hun dns op 1 server draaien. Heb ik geen problemen mee, hoor.

Heel vreemd dat die niet redundant zijn aangesloten over verschillende paden qua ducts naar IX...
Bizar.

Dat is wel de 'schijnveiligheid' en schijn-redundantie die je gewoon ongelofelijk vaak ziet.

Natuurlijk meerdere verbindingen, alleen door een zelfde duct.
Ja, natuurlijk 2 x 10KV lijn het pand in, maar ze komen van het zelfde 10KV station (waar alsnog een singel point of failure bestaat).

Wij waren ook getroffen door deze storing en na het lezen van het storingsverslag blijf ik toch met het gevoel zitten dat CloudVPS hier een steek heeft laten vallen.

In het storingsverslag van CloudVPS staat:

CloudVPS maakt gebruik van een ringnetwerk tussen de drie datacentra
waarbij in principe de uitval van een verbinding kan worden opgevangen. Bij
de werkzaamheden vanochtend zijn helaas twee kabels geraakt waardoor de
communicatie tussen de datacentra niet meer automatisch kon worden
hersteld.

...ingekort...

Met het incident van maandagochtend is duidelijk geworden dat tegen de
afspraken in twee glasvezelverbindingen toch een deel van het traject delen
met elkaar en beiden waren geraakt. De nieuwe glasvezelverbinding was niet
geraakt door de werkzaamheden, wat ook betekent dat deze niet niet via
hetzelfde traject loopt.

Om de dienstverlening te herstellen hebben we daarom de nieuwe glasvezel
versneld in gebruik genomen en de dataverbindingen stap voor stap
overgezet. Vanaf 12:30 is de dienstverlening in stappen beschikbaar gekomen
en zijn de VPS'en weer bereibaar geworden

Ik heb geen zicht op eerdere activiteiten die CloudVPS heeft ondernomen om met hun leveranciers ervoor te zorgen dat de glasvezels daadwerkelijk gescheiden waren, maar mijn eerste ingeving is dat als ze verder/langer hadden doorgevraagd ze eerder hadden moeten/kunnen weten dat er helemaal geen sprake was van een ring. Het zou ook zomaar kunnen dat ze al enige tijd van dit probleem op de hoogte waren en juist daarom de nieuwe glasvezel hadden aangevraagd.

Mede na alle Openstack problemen heeft ons vertrouwen in CloudVPS iig een stevige deuk opgelopen. Ik ben eigenlijk wel benieuwd hoe jullie denken over de verantwoordelijkheid van een hosting partij hiervoor. Hoe ver ga je in de controle op je leveranciers en hoe controleer je dat het klopt wat de leveranciers in de supply-chain aangeven? Bestaan hier bv richtlijnen voor en wat kan ik als klant hieraan doen?

Wat ging er mis met Openstack bij CloudVPS?

Wel de juiste partij aanwijzen inderdaad.
Zou niet te voorbarig roepen.
Kan best dat het datacenter het wel helder in de overeenkomst had gezet, weten wij veel