Bekijk Volledige Versie : Storing Grafix
Mijn host heeft een kast gehuurd bij Grafix en deze ligt er sinds vanmorgen 9:30 weer eens uit.
Alle websites zijn onbereikbaar, inclusief die van Grafix zelf.
Naar mijn gevoel gebeurd het een beetje te veel bij dit bedrijf (of het nu wel of niet direct hun schuld is).
Mijn vraag aan jullie is dan ook: hoe vaak mag een hele serverruimte er nou naar jullie gevoel uitliggen per jaar, en hoe lang ?
http://www.pro-noc.nl/smokeping.cgi?target=ISP_smokestats.Grafix
dood..
Triloxigen
01/12/05, 12:33
Origineel geplaatst door kiterider Mijn vraag aan jullie is dan ook: hoe vaak mag een hele serverruimte er nou naar jullie gevoel uitliggen per jaar, en hoe lang ? [/B]
Ligt eraan over welk deel je het hebt..
Het kan liggen door stroomuitval, aan het dc, aan het nwerk, aan de colocater, aan fouten van admins, aan DoS aanvallen..
Etc
Connectivity van Grafix werkt nogsteeds in Amsterdam, DSL verbindingen zijn momenteel traag.
Dat vind ik persoonlijk het droevige op dit moment, mijn colo heeft al enkele malen contact gehad met grafix en men heeft geen idee wat er speelt blijkbaar (of wil het liever stil houden).
Daarbuiten wisten ze niet eens dat er storing was toen het gemeld werd, wat ik persoonlijk wel ERG vreemd vind.
Stroomuitval en colo sluit ik persoonlijk voor het gemak uit, alle servers van de colo én die van grafix zelf liggen er uit en kasten op dezelfde verdieping doen het allemaal nog.
Maar naar mijn idee is een storing van 2 uur in de hedendaagse tijd toch niet écht meer iets wat veel voorkomt, dat is wat ik eigenlijk een beetje wat ik wil peilen.
Ik heb met grafix gebeld en het ligt aan een glasvezelkabel tussen rotterdam en amsterdam. Er is een bedrijf ingeschakeld die gaat kijken waar het fout gaat [(meten)
Voor de rest vind ik dat je grafix een beetje zwart maakt wat zoveel storing is er niet. Met Versatel is grafix trouwens nog wel bereikbaar maar via een antal providers niet
Origineel geplaatst door kiterider
Dat vind ik persoonlijk het droevige op dit moment, mijn colo heeft al enkele malen contact gehad met grafix en men heeft geen idee wat er speelt blijkbaar (of wil het liever stil houden).
Daarbuiten wisten ze niet eens dat er storing was toen het gemeld werd, wat ik persoonlijk wel ERG vreemd vind.
Stroomuitval en colo sluit ik persoonlijk voor het gemak uit, alle servers van de colo én die van grafix zelf liggen er uit en kasten op dezelfde verdieping doen het allemaal nog.
Maar naar mijn idee is een storing van 2 uur in de hedendaagse tijd toch niet écht meer iets wat veel voorkomt, dat is wat ik eigenlijk een beetje wat ik wil peilen.
Persoonlijk vind ik het erg zieligmakend, dat telkens weer een bedrijf zwart wordt gemaakt terwijl men veelal nieteens weet wat de oorzaak van de storing is, bel Marco op vraag aan hem wat er aan de hand is in plaats van hier weer een bedrijf onnodig de grond in proberen te stampen.
Ik heb contact gehad met Grafix. Momenteel ligt er een verbinding tussen AMS en RTD uit. Niet alleen grafix heeft hier last van, maar ook andere partijen in Rotterdam (Spaanse Kubus) schijnen hier last van te hebben.
Er wordt aan gewerkt door de leverancier van de verbinding.
Origineel geplaatst door RPH
Ik heb met grafix gebeld en het ligt aan een glasvezelkabel tussen rotterdam en amsterdam. Er is een bedrijf ingeschakeld die gaat kijken waar het fout gaat [(meten)
Voor de rest vind ik dat je grafix een beetje zwart maakt wat zoveel storing is er niet. Met Versatel is grafix trouwens nog wel bereikbaar maar via een antal providers niet
Dan kom jij hier even de telefoon opnemen!
Waar gaat dit allemaal over ?
Mensen, denk eens even na voordat je onzin gaat uitkramen over zwart maken !!
Ik geef enkel aan dat ik storing heb en vraag jullie wat jullie mening is.
We zijn geloof ik allemaal als de dood dat er naar buiten komt dat het ene bedrijf meer storing heeft als de ander, en dat mensen zoals ik, de klant, onze beslissingen daarop gaan baseren (en ja, dat doe ik).
Sorry, maar ik zie écht niet waar ik grafix zwart maak.
Origineel geplaatst door Toon
Dan kom jij hier even de telefoon opnemen!
pff, moet ik weer zo'n eind rijden! :>
Wat ik ervan vind, ziet er natuurlijk niet zo best uit. Maar zover ik kan zien ligt de fout _niet_ bij Grafix maar bij de partij die de verbindingen verzorgt tussen Rotterdam en Amsterdam. (Carrier1, EuroFiber, Interoute??)
TrueServer heeft een tijdje geleden ook problemen gehad met de fibers richting Redbus waardoor ook het één en ander mis ging, fout van True of Grafix?
;)
Heren, dames,
Interoute heeft een ernstige storing binnen ( waarschijnlijk ) haar Amsterdam metro.
Helaas zijn daardoor beide trajecten tussen Rotterdam en Amsterdam van ons onbereikbaar. Andere partijen die gebruik maken van het Interoute netwerk hiervoor ondervinden helaas dezelfde problemen.
Wij doen ons best om iedereen telefonisch keurig te woord te staan en nader te informeren over deze vervelende situatie.
De fibers van Interoute worden momenteel door hun via Telecity2 door gemeten om te kunnen constateren waar de fout zit.
Excuses voor de veroorzaakte overlast.
Mochten er verdere vragen zijn dan zijn wij bereikbaar via 0180-450170. Let wel op, het kan zijn dat u tweemaal moet bellen daar wij overspoelt worden met telefoontjes.
Nogmaals excuses voor de vervelende situatie.
MvG
Marco van Gink
Kijk, dat is een duidelijk antwoord.
Dit roept alleen bij mij een andere vraag op. Ik begreep dat grote colo bedrijven, waaronder Grafix, altijd gebruik maken van meerdere aansluitingen om ervoor te zorgen dat als er één verbinding uitvalt er toch nog iets mogelijk is (ok, niet op de volle bandbreedte).
Nu ligt er naar ik begrijp dus inderdaad de hoofdverbinding uit, dan zou de ruimte toch nog steeds, in mindere mate, bereikbaar moeten zijn. Dat is dus vanaf hier (Xs4all) niet het geval. Wat is dan het nut van zo'n 2e pijplijn vraag ik me af ?
Triloxigen
01/12/05, 13:15
Ik weet niet exact hoe hun lijnen zijn opgebouwd, maar wellicht is het netwerk zo zwaar overbelast dat er nu niks meer werkt.
Origineel geplaatst door Triloxigen
Ik weet niet exact hoe hun lijnen zijn opgebouwd, maar wellicht is het netwerk zo zwaar overbelast dat er nu niks meer werkt.
Het is juist het idee dat je backup lijn(en) alle traffic kan handelen toch? :-)
Neemt niet weg dat ik hoop dat deze storing snel is opgelost voor Grafix! Dit is erg vervelend, zeker als je er zelf fisiek niets aan kan doen.
Erg vervelend dit. Veel sterkte ermee Marco!
Vanaf Versatel werkt het idd
Pingen naar 217.67.224.2 met 32 byte gegevens:
Antwoord van 217.67.224.2: bytes=32 tijd=67 ms TTL=56
Antwoord van 217.67.224.2: bytes=32 tijd=37 ms TTL=56
Antwoord van 217.67.224.2: bytes=32 tijd=80 ms TTL=56
Antwoord van 217.67.224.2: bytes=32 tijd=85 ms TTL=56
Ping-statistieken voor 217.67.224.2:
Pakketten: verzonden = 4, ontvangen = 4, verloren = 0
(0% verlies).De gemiddelde tijd voor het uitvoeren van één bewerking in milliseconden:
Minimum = 37ms, Maximum = 85ms, Gemiddelde = 67ms
tracert 217.67.224.2
Bezig met het traceren van de route naar ns01.grafix-is.com [217.67.224.2]
via maximaal 30 hops:
1 1 ms <1 ms <1 ms 192.168.1.1
2 49 ms 24 ms 25 ms *
3 26 ms 26 ms 30 ms ge-2-0-0-1120.ncr01ht.versatel.net [217.16.39.1]
4 28 ms 29 ms 28 ms 217.16.47.82
5 28 ms 28 ms 28 ms ams-001.interoute.net [195.69.144.81]
6 30 ms 29 ms 29 ms PO4-0.ams-koo-core-2.interoute.net [212.23.41.190]
7 29 ms 29 ms 29 ms PO2-0.rtm-vla-access-1.interoute.net [212.23.41.202]
8 68 ms 31 ms 33 ms 217.118.121.134
9 75 ms 33 ms 43 ms ns01.grafix-is.com [217.67.224.2]
De trace is voltooid.
We hebben zojuist een bevriende werknemer van Interoute gesproken (Interoute NOC reageerd niet en weet niets) en het blijkt dat de fiber ter hoogte van Den Haag is geraakt bij graafwerkzaamheden.
Op dit moment zijn ze een las plan aan het opstellen, de exacte schade is niet bekend maar dit zijn bijzonder dikke fibers (144+) dus dat is helaas niet zomaar gelast.
Mocht ik meer horen dan laat ik het weten
Kan Grafix verkeer in hun range in rotterdam niet om routeren via versatel, waarmee ze link hebben in de spaanse kubus?
Origineel geplaatst door We Dare
We hebben zojuist een bevriende werknemer van Interoute gesproken (Interoute NOC reageerd niet en weet niets) en het blijkt dat de fiber ter hoogte van Den Haag is geraakt bij graafwerkzaamheden.
Op dit moment zijn ze een las plan aan het opstellen, de exacte schade is niet bekend maar dit zijn bijzonder dikke fibers (144+) dus dat is helaas niet zomaar gelast.
Mocht ik meer horen dan laat ik het weten Hebben jullie van deze storing ook last of gaat wedare niet over deze fiber?
Origineel geplaatst door Michel2k
Kan Grafix verkeer in hun range in rotterdam niet om routeren via versatel, waarmee ze link hebben in de spaanse kubus?
imho kan dat alleen wanneer er specifieker geannounced gaat worden, in de huidige situatie kan dat niet.
Origineel geplaatst door gsh2
Hebben jullie van deze storing ook last of gaat wedare niet over deze fiber?
Ons hoofdtraject loopt ook over een darkfiber van Interoute deze loopt naar Telecity2, wij hebben ook nog een tweetal links naar Sara welke op dit moment het verkeer hebben overgenomen.
Opzich ondervinden wij dus geen hinder van deze storing, wat niet weg neemt dat het erg vervelend is.
MediaServe
01/12/05, 14:34
Omgeroute, of is het probleem al opgeslost?
Swiftway-UK
01/12/05, 15:17
Succes met oplossen van de storing, het brengt altijd zo enorm veel werk mee!
Dit is duidelijk overmacht mensen, niet alles is in de provider haar hand, helaas ;)
Bgp sessie(s) lijken ook down ? :|
*niet meer, was van vanmorgen*
weer down al geruimte tijd. Mensen meer info? Graag posten.
Origineel geplaatst door deeltje
weer down al geruimte tijd. Mensen meer info? Graag posten.
Het lijkt me dat een probleem van deze omvang flink wat tijd nodig heeft. Beetje geduld is wel op zijn plaats :). Gewoon goed uitleggen aan je klanten wat er mis is, lijkt me dat mensen hier gewoon begrip voor kunnen opbrengen.
Interoute geeft heel erg weinig terugkoppeling.
We zijn tussen 1315u en 1400u weer "live" geweest, maar daarna is het signaal wederom weggevallen waarschijnlijk wegens las-werkzaamheden.
Interoute is er druk mee bezig, maar kan helaas weinig dingen toezeggen/garanderen...
Zodra er een duidelijke update is, zal ik deze hier posten.
Bij vragen zijn wij bereikbaar op 0180-450170
Groet, Marco
Interoute heeft mij zojuist gemeld dat zij de verbinding rond 1800u weer live verwachten te hebben.
Ze zijn momenteel nog bezig met het splicen van de fibers, en die van ons staat gepland richting 1800u.( 1800u NL tijd, 1700u UK tijd!! )
Onze prioriteit is het terug bereikbaar krijgen van ons complete netwerk. Een mailing met nader uitleg en verklaringen zal via de mailinglijst toegezonden worden aan onze relaties. Ik zal op korte termijn tevens toelichting geven over de vermelde vragen in deze posting.
Dank. Marco
Origineel geplaatst door deeltje
weer down al geruimte tijd. Mensen meer info? Graag posten. WHT is nou niet echt een belangrijk forum voor een hoster lijkt me.
Ik denk ook niet dat je kan verwachten dat iemand van Grafix elke 5 minuten een update hier gaat posten, of wel?
Denk dat ze andere dingen aan hun hoofd hebben, het repareren er van.
Origineel geplaatst door Wido
WHT is nou niet echt een belangrijk forum voor een hoster lijkt me.
Ik denk ook niet dat je kan verwachten dat iemand van Grafix elke 5 minuten een update hier gaat posten, of wel?
Denk dat ze andere dingen aan hun hoofd hebben, het repareren er van.
Kijk eens boven je :S
Nou hopelijk is het om 6 uur weer online, duurt nu wel erg lang.
Origineel geplaatst door Wouter-IG
Nou hopelijk is het om 6 uur weer online, duurt nu wel erg lang.
Het zou nu ongeveer online moeten komen (is er dan niemand die leest?)
Jij leest het blijkbaar niet goed, 18.00 is toch echt 6 uur.
Ik heb net met GrafiX gesproken en ze hebben een toezegging gehad dat het om 18:00 uur gerepareerd zou moeten zijn.
Beste Marco,
Ik zou het op prijs stellen als je me (uiteraard wanneer je tijd hebt) antwoord kan geven op mijn eerder gestelde vraag aangaande backup verbindingen die blijkbaar niet goed werken.
Alvast bedankt voor je antwoord.
Origineel geplaatst door kiterider
Beste Marco,
Ik zou het op prijs stellen als je me (uiteraard wanneer je tijd hebt) antwoord kan geven op mijn eerder gestelde vraag aangaande backup verbindingen die blijkbaar niet goed werken.
Alvast bedankt voor je antwoord.
Origineel geplaatst door GrafiX
Bij vragen zijn wij bereikbaar op 0180-450170
Groet, Marco
:huh:
Origineel geplaatst door Wouter-IG
Jij leest het blijkbaar niet goed, 18.00 is toch echt 6 uur.
Dat is aangepast, er stond net nog 17.00. Dat heb ik zelf nog gezien!
Origineel geplaatst door Xerious
Dat is aangepast, er stond net nog 17.00. Dat heb ik zelf nog gezien!
17.00 UK tijd :P
Origineel geplaatst door gsh2
:huh:
GSH2 ik denk dat Kiterider bedoelt dat Marco reageert wanneer hij tijd heeft, om nu te bellen heeft geen zin hierover. ;)
Hoewel ik mij wel aansluit bij de vraag van Kiterider. Waarom is er geen (goede) backup verbinding geweest? :(
Origineel geplaatst door Gh0sty
17.00 UK tijd :P
Dat ga je ook echt posten hè bij werkzaamheden in Nederland tegen Nederlandse klanten...!
Interoute zal GMT handteren.
Ja ik zie het al, het is al verduidelijkt. Ik was in de veronderstelling dat het Nederlandse tijd was en daarom dacht ik dat de poster zijn tijd had aangepast omdat GrafiX toch langer nodig bleek te hebben.
Update;
Volgens Interoute zijn de werkzaamheden afgerond, echter wij hebben nog altijd geen signaal.
Ze sturen nu direct de Field Manager weer naar de lokatie toe en die neemt zo direct contact met ons op.
Wordt wederom vervolgd...
Inmiddels anderhalf uur later, nog nieuws?
Tja... ken ook wel weer wat nieuws gebruiken... want mijn Nagios blijft maar toeteren dat er een boel servertjes uit liggen :( ;).
Nog afgezien van de GSM die ligt bij te komen aan de oplader!
Offtopic (vrolijke noot, onder het mom van: "Je moet wat!") :
Scheelt wel in de logfiles vannacht en de statistieken... die zijn zo klaar ;)
Grafix,
Waarom swappen jullie niet tijdelijk naar andere route? Naar mijn weten namen jullie ook transit af te kubus. (was in ieder geval in het verleden zo).
Dan lijkt het mij toch zo dat je het verkeer over Versatel routeerd.
up :D:D
over interoute transit zo te zien
Een groot deel is nu weer online, maar nog niet alles! Probleem is dus nog niet verholpen door Interoute.
Houd jullie op de hoogte.
Het is ondertussen bijna half negen en er ligt nog steeds een behoorlijk gedeelte van de ruimte op de 7e verdieping offline, intern vanaf de 4e is alles wél up merk ik overigens.
Naar wat Marcell zegt blijkbaar via een andere route, is het mogelijk dat alleen de ip reeksen van Grafix omgezet zijn en niet de eigen reeks(en) van hosting providers die ruimte huren bij Grafix ?
kiterider,
misschien even storingsnr bellen?
kiterider,
Quote uit eerder bericht:
Mochten er verdere vragen zijn dan zijn wij bereikbaar via 0180-450170. Let wel op, het kan zijn dat u tweemaal moet bellen daar wij overspoelt worden met telefoontjes.
Einde quote
En anders wachten op een update van Marco.
HighFly
Uiteraard is dat een mogelijkheid, maar aangezien ik geen directe klant van Grafix ben, maar wel in de ruimte's die ze verhuren zit via een andere partij vind ik het niet gepast zijn (nu ongetwijfeld kostbare) tijd te verspillen met telefoontjes van "derden" zoals mezelf.
Uiteraard heb ik de partij waarbij ik huur al wel diverse malen gesproken, ik probeer langs deze weg alleen een duidelijk(er) beeld te krijgen op het geheel.
Origineel geplaatst door HighFly
kiterider,
Quote uit eerder bericht:
Mochten er verdere vragen zijn dan zijn wij bereikbaar via 0180-450170. Let wel op, het kan zijn dat u tweemaal moet bellen daar wij overspoelt worden met telefoontjes.
Einde quote
En anders wachten op een update van Marco.
HighFly
Op dat nummer nemen ze niet op.
Ook marco neemt op GSM niet op.
Het is nu 21:34, mijn servers nog dood, mijn dSL verbinding overleden ( zit op inbel)
Kortom, not happy here..
Hier in Rotterdam werken mijn website's weer!!!
Klopt inderdaad, alles lijkt weer online te zijn
Origineel geplaatst door kiterider
Het is ondertussen bijna half negen en er ligt nog steeds een behoorlijk gedeelte van de ruimte op de 7e verdieping offline, intern vanaf de 4e is alles wél up merk ik overigens.
Naar wat Marcell zegt blijkbaar via een andere route, is het mogelijk dat alleen de ip reeksen van Grafix omgezet zijn en niet de eigen reeks(en) van hosting providers die ruimte huren bij Grafix ?
Zo te zien een /24 en een /22 van de eigen ranges en daarnaast nog wel een andere reeks van een andere hosting provider.
Origineel geplaatst door Unixboy
Grafix,
Waarom swappen jullie niet tijdelijk naar andere route? Naar mijn weten namen jullie ook transit af te kubus. (was in ieder geval in het verleden zo).
Dan lijkt het mij toch zo dat je het verkeer over Versatel routeerd.
Ik ben nog wel benieuwd naar het antwoord op deze vraag als Grafix tijd heeft natuurlijk :).
Volgens mij gebeurd dit inmiddels ook, het verkeer naar Grafix vanaf hier loopt in ieder geval niet via de gebruikelijke route.
Dat is vrij simpel, ze bieden ADSL en andere services aan in Amsterdam, en ze bieden ook services aan in Rotterdam op hun netwerk. Dus geografisch gezien heb je 1 groot netwerk.
Als je dat doet en geen backup lijn hebt liggen van een andere toko dan kan je het beste de ip adressen die je naar andere providers toe gooit splitsen.
Dus ik heb een range:
xxx.xxx.xxx.xxx/20 en die gebruik ik zowel in rotterdam en in amsterdam, lijn ertussen uit dan word de hele ip reeks zowel in rotterdam als in amsterdam geannounced, dus ook bijvoorbeeld naar chello toe in Amsterdam, trace je dan, dan stopt ie in amsterdam want hij kan niet verder door naar rotterdam, en de klanten in amsterdam met ip;s uit die reeks kunnen nog wel bij hun server vanaf chello.
Maar! Klanten op versatel kunnen dan niet in amsterdam komen op die ip reeks omdat grafix dezelfde range ook gebruikt voor ip's op servers in rotterdam. Waar dan versatel klanten die zijn netwerk heeft aangesloten op het rotterdam gedeelte van grafix alleen nog in rotterdam kunnen komen, en hun site dus wel werkt.
Wat grafix beter had kunnen doen is die /20 of welke range dan ook ff door midden knippen en twee /21's van maken, het ene blok in amsterdam en het andere blok in rotterdam en dan via bgp erin rammen dat als link tussen rotterdam en amsterdam wegvalt dat je dan alleen het ip blok van die locaties op de locaties houd, en niet dus visa versa gaat routen.
Vrij simpel principe, maar ja dat is een backup lijn via een andere provider ook, maar dat heeft meer met centjes te maken. Je betaald daar nml ook geen 150 euro per mbps. ;)
Origineel geplaatst door DennisP
Dus ik heb een range:
xxx.xxx.xxx.xxx/20 en die gebruik ik zowel in rotterdam en in amsterdam, lijn ertussen uit dan word de hele ip reeks zowel in rotterdam als in amsterdam geannounced, dus ook bijvoorbeeld naar chello toe in Amsterdam, trace je dan, dan stopt ie in amsterdam want hij kan niet verder door naar rotterdam, en de klanten in amsterdam met ip;s uit die reeks kunnen nog wel bij hun server vanaf chello.
Maar! Klanten op versatel kunnen dan niet in amsterdam komen op die ip reeks omdat grafix dezelfde range ook gebruikt voor ip's op servers in rotterdam. Waar dan versatel klanten die zijn netwerk heeft aangesloten op het rotterdam gedeelte van grafix alleen nog in rotterdam kunnen komen, en hun site dus wel werkt.
Wat grafix beter had kunnen doen is die /20 of welke range dan ook ff door midden knippen en twee /21's van maken, het ene blok in amsterdam en het andere blok in rotterdam en dan via bgp erin rammen dat als link tussen rotterdam en amsterdam wegvalt dat je dan alleen het ip blok van die locaties op de locaties houd, en niet dus visa versa gaat routen.
Vrij simpel principe, maar ja dat is een backup lijn via een andere provider ook, maar dat heeft meer met centjes te maken. Je betaald daar nml ook geen 150 euro per mbps. ;)
1) Ik mag hopen dat Grafix niet groter routeerd dan /24's ;-) en dat zij weten wat waarheen moet!
2) Wat grafix beter had kunnen doen is zorgen dat de downtime zo laag mogelijk was gebleven misschien de Versatel transit activeren? :)
3) Just my 2 cents maar een route change duurd geen x uur, ok je darkfiber kan door midden liggen maar daar heb je toch een Emergency plan voor of ben ik gek :)
Origineel geplaatst door Unixboy
1) Ik mag hopen dat Grafix niet groter routeerd dan /24's ;-) en dat zij weten wat waarheen moet!
2) Wat grafix beter had kunnen doen is zorgen dat de downtime zo laag mogelijk was gebleven misschien de Versatel transit activeren? :)
3) Just my 2 cents maar een route change duurd geen x uur, ok je darkfiber kan door midden liggen maar daar heb je toch een Emergency plan voor of ben ik gek :)
:rolleyes:
1) ik mag hopen van niet, /24's worden meestal al uitgefilterd, het is niet conform ripe voorwaarden om heel je block in stukjes te gaan opdelen. De routing tabel is al mega groot (170k plus routes), maar voor zulk soort situaties is een /18 of een /20 in twee delen wel te verantwoorden.
2) die was online maar als je die blokken niet hebt geknipt lees dan nogmaals mijn verhaal.
3) een route change aanvragen en alles opknippen en veranderen en dat de hele wereld over krijgen duurt zeker minimaal een dag, en een emergency plan, lees mijn laatste zin, van mijn vorige verhaal.
;)
Origineel geplaatst door Wouter-IG
Jij leest het blijkbaar niet goed, 18.00 is toch echt 6 uur.
srry ;) las de UK time :D