Bekijk Volledige Versie : Trueserver problemen?
Van de truecare website:
Storing
Door een storing op de verbinding van het traject Redbus Interhouse - Telecity 1 is het algemene VLAN tussen deze locaties off-line.
Onze excuses voor de mogelijke overlast.
Updates volgen.
Origineel geplaatst door TrancePitt
Verhuisd >>
Mag wel weg :)
Ze zijn echt down. Iig een aantal verbindingen. Er is een engineer onderweg. De trueserver site zelf is ook niet bereikbaar.
Schiet weer lekker op, het is nu al bijna een uur
Van de truecare website:
Storing
Door een storing op de verbinding van het traject Redbus Interhouse - Telecity 1 is het algemene VLAN tussen deze locaties off-line.
Onze excuses voor de mogelijke overlast.
Updates volgen.
Aangezien er toch iets aan de hand is, haal ik topic nog niet weg. Het bericht van de truecare website heb ik maar even gequote in de startpost aangezien er anders zo’n loze startpost is.
Vreemd dat tweakers.net het wel doet welke ook in redbus zit bij trueserver
Het lijkt mij gewoon een configfout op hun switches/routers waardoor hun "algemene vlan" eruit ligt, maar de klanten met een eigen vlan (zoals t.net?) niet :) Kan er misschien iets mee te maken hebben dat tweakers.net pas verhuisd is ofzo. Beetje slordig, maar ja :p
Volgens mij komt het omdat Tweakers.net een eigen IP-reeks heeft die rechtstreeks naar redbus gerouteert word. Veel andere ip-reeksen worden zowel in Redbus als Telecity 2 gebruikt en worden eerst naar Telecity 2 gerouteerd. Van daaruit gaat het over het VLAN naar Redbus (of een andere lokatie).
Maarja, als die link down is...
t.net en motor-forum lagen er straks beiden uit. Zo`n minuut of tien niet te bereiken.
T.net en Fok lagen ook plat, inclusief wat streaming servers van een klant van me. Dat is allemaal alweer opgelost. Het had te maken met een stukke fiberswitch.
2 problemen op 1 dag dus :x
Aangezien er nog steeds zooi bij Trueserver plat ligt (waaronder ook www.trueserver.nl)
neographikal
07/12/04, 18:25
De snelheid is nu anders nog steeds om te janken eerlijk gezegd, en de routering loopt ook niet echt zoals normaal:
5 13 ms 13 ms 14 ms ge0-0-0.ams-ix.ams1.trueserver.nl [195.69.144.16
]
6 13 ms 13 ms 14 ms ge0-0-0.m20-2.ams1.trueserver.nl [213.239.156.62
7 14 ms * 13 ms ge2-2-0.m40.ams5.trueserver.nl [213.193.237.141]
8 15 ms 14 ms 13 ms ge5-1.bd6808-1.ams5.trueserver.nl [213.239.183.2
2]
9 14 ms 15 ms 15 ms tweakers.net [213.239.154.35]
En dan rijst bij me de vraag:
Waarom ~170 per mbit (95%) neertellen wanneer je nog steeds zulke downtimes voorgeschoteld krijgt? (ruim 2 uur al)
Wie zegt dat het hun eigen fout is? En waarom gaat men en masse zeiken over een bedrijf wat bizar weinig downtime kent?
Als we de berichten op truecare moeten geloven zit het in de glasvezel tussen TC2 en RB.
Ik vraag me af: waarom is deze lijn eigelijk niet dubbel uitgevoerd? :huh:
Edit: het werkt weer :)
Gelukkig heb ik er op Telecity2 geen last van. :).
Het lijkt echter niet aan True te liggen maar aan de Fiberboer. :)
Op TC ligt tenminste alles direct, daarom zit ik daar. :)
Origineel geplaatst door jurrian
Als we de berichten op truecare moeten geloven zit het in de glasvezel tussen TC2 en RB.
Ik vraag me af: waarom is deze lijn eigelijk niet dubbel uitgevoerd? :huh:
Edit: het werkt weer :)
Vroeg ik me ook af. Alles van True op RB is redundant, op TC niet. Daarom vraag ik me ook af waarom RB nu down is, en TC (mijn machines) niet. :)
Voor mij werkte 't (op dozen @ redbus van mijn klant) al na 10 minuten weer, maar goed werk van True zelf. Daar hebben ze wel verstand van zaken. :)
MediaServe
07/12/04, 18:49
Ik had eergisteren ook al problemen met mijn website, die via Trueserver op het Internet hangt.
http://www.mediacreations.nl/ is down sinds: 2004-12-05 22:41:12
http://www.mediacreations.nl/ is weer up sinds 2004-12-06 03:23:04, na een downtime van 4 uur en 42 minuten.Dat was een storing op alle servers van Prioserve, een klant van Trueserver. Nou weet ik niet of dat een fout van Trueserver of Prioserve was.
Iemand anders ook downtime geconstateerd rond die tijd?
Origineel geplaatst door Cybafish
En dan rijst bij me de vraag:
Waarom ~170 per mbit (95%) neertellen wanneer je nog steeds zulke downtimes voorgeschoteld krijgt? (ruim 2 uur al)
Omdat het netwerk verder wel erg goed is? Service die uitstekend is?
En daarbij, dit kan iedereen overkomen.
Origineel geplaatst door Vane
Omdat het netwerk verder wel erg goed is? Service die uitstekend is?
En daarbij, dit kan iedereen overkomen.
Over de service zal ik het maar even niet hebben, want daar heb ik andere ervaringen mee... En dit probleem kan iedereen overkomen ja, maar je kunt de schade beperken door je verbinding dubbel uit te voeren...
neographikal
07/12/04, 19:52
Volgens mij is het nog steeds niet echt opgelost, de snelheid richting tweakers.net is echt om te janken atm en de routing loopt nog steeds vreemd :)
Inderdaad, het is echt niet vooruit te branden...
Hoop dat het snel weer oke is :-)
Dit is de 1ste keer dit heel jaar dat trueserver eens problemen heeft en ineens is het een kutprovider.... Wat een rare denkwijze.
btw. denk is na, je kan zo redundant uitvoeren als je maar wilt. Er kunnen altijd meerdere problemen tegelijkertijd komen.
bv. Je 1ste fiber tussen 2 lokaties doet raar en je switch naar de tweede, na een paar minuten doet je fiberswitch ineens raar. Resultaat is problemen...
De ring van ze is stuk; waarschijnlijk een graafmachine oid.
Origineel geplaatst door Synssans
De ring van ze is stuk; waarschijnlijk een graafmachine oid.
Komt aardig veel voor in amsterdam (teveel).
Origineel geplaatst door luser
Dit is de 1ste keer dit heel jaar dat trueserver eens problemen heeft en ineens is het een kutprovider.... Wat een rare denkwijze.
Tja, want HUN provider heeft natuurlijk nooit problemen! :) Nee, zonder gekheid, netwerken zijn complexe dingen, zeker in het formaat als bijv. Trueserver en wijzelf hebben. Er kunnen op allerlei punten dingen stuk gaan, hoe redundant je het ook maakt.
wbakker-letsgoonline
07/12/04, 20:28
Mijn server draait nog wel :) snelheid is niet echt snel maar kan komen omdat ik even een install file voor freebsd aan het downloaden ben :).
motor-forum is idd ook erg traag '(
Servers staan ook bij trueserver in de redbus locatie, net als fok en GoT. Ach, het is vervelend, kan gebeuren ;)
neographikal
07/12/04, 22:02
En nou is ie definitief dood hier :)
tweakers.net is hier ook ineens dood :(
Triloxigen
07/12/04, 22:42
En nu doet ie het weer :)
wat ik er van begrepen heb is dat Trueserver al het verkeer nu omgeleid heeft. Het werkt wel maar is nog wel erg traag.
MediaServe
07/12/04, 22:56
Origineel geplaatst door viccie
wat ik er van begrepen heb is dat Trueserver al het verkeer nu omgeleid heeft. Het werkt wel maar is nog wel erg traag. Heb je misschien een bron ofzo? Op www.trueserver.nl wordt vooralsnog gezwegen over de netwerk problemen. Bovendien is er een MySQL probleem op hun website :(
Origineel geplaatst door MediaCreations
Heb je misschien een bron ofzo? Op www.trueserver.nl wordt vooralsnog gezwegen over de netwerk problemen. Bovendien is er een MySQL probleem op hun website :(
mijn bron is een van de sysadmins van www.motor-forum.nl en die wist het weer van de netwerkstatus pagina op www.truecare.nl ;)
CombatServers
07/12/04, 23:06
Origineel geplaatst door viccie
mijn bron is een van de sysadmins van www.motor-forum.nl en die wist het weer van de netwerkstatus pagina op www.truecare.nl ;)
Die nu alle2 niet meer werken
Er zijn meer partijen zoals BabyXL die ook problemen hebben; er zijn een aantal fibers stuk bij Eurofiber (levert oa. aan Trueserver en BabyXL).
True is op dit moment inderdaad bezig om fibers om te prikken en verkeer om te leiden.
Origineel geplaatst door CombatServers
Die nu alle2 niet meer werken
ja daar kwamen we net ook allebei tegelijk achter :(
Hij verwachtte niet dat het vannacht nog naar behoren gaat werken. (maar dat is slechts een veronderstelling van hem, gebaseerd op ervaringen van anderhalf jaar geleden toen hetzelfde gebeurde).
Helaas ligt dit alles ook buiten de macht van trueserver, hopelijk kunnen ze alles snel herstellen.
Triloxigen
07/12/04, 23:15
Origineel geplaatst door MediaCreations
Heb je misschien een bron ofzo? Op www.trueserver.nl wordt vooralsnog gezwegen over de netwerk problemen. Bovendien is er een MySQL probleem op hun website :(
Bron is traceroute...
Ik krijg normaal een andere traceroute als dat ik ju krijg, duidelijk omgeleid...
En dat de MySQL deamon niet meer perfect draait is simpelweg doordat nu iedereen de trueserver website aan het bezoeken is en de database het niet aankan.
Wat ik van mijn hosting krijg: (wellicht ook interessant voor anderen)
Binnen nu en een uur gaat TrueServer even de verbinding eruit gooien:
Naar aanleiding van de fiber-breuk deze middag hebben we een performance probleem op het interne netwerk op Telecity zijn wij genoodzaakt om binnen nu en een uur onderhoud te plegen op een van de twee Juniper M20's op Telecity.
Tijdens dit onderhoud zullen er verschillende interfaces op de router gewisseld moeten worden. Deze werkzaamheden zullen ongeveer 45 minuten in beslag nemen. Een van de interfaces die gewisseld gaat worden is de glasmodule die aangesloten is op een van de core-switches op Telecity er zal daarom een onderbreking in de connectivity plaats vinden. We verwachten dat dit een totale downtime van maximaal 15 minuten met zich mee zal brengen.
22.05u - Zojuist hebben wij bevestiging gekregen van de glasvezel leverancier. Er is een bundel van 48 fibers gebroken. Reparatie zal naar schatting 2 uur duren.
en alles werkt weer :)
enige minpuntje is die maintenance mail die ze naar iedereen gestuurd hebben. Die hadden ze best ff kunnen bcc'en ipv cc'en. Iemand de 343 mailadressen van de klanten van trueserver hebben O-)
neographikal
08/12/04, 00:37
Origineel geplaatst door viccie
en alles werkt weer :)
enige minpuntje is die maintenance mail die ze naar iedereen gestuurd hebben. Die hadden ze best ff kunnen bcc'en ipv cc'en. Iemand de 343 mailadressen van de klanten van trueserver hebben O-)
Nog steeds zo traag als het maar kan, en het verkeer wordt nog steeds omgeleid:
C:\Documents and Settings\neo>tracert www.tweakers.net
Bezig met het traceren van de route naar www.tweakers.net [213.239.154.35]
via maximaal 30 hops:
1 <1 ms <1 ms <1 ms 10.0.0.138
2 9 ms 9 ms 17 ms 195.190.240.119
3 13 ms 12 ms 13 ms 42.ge-1-0-1.xr2.d12.xs4all.net [194.109.5.189]
4 13 ms 13 ms 13 ms 0.so-7-0-0.xr1.tc2.xs4all.net [194.109.5.14]
5 13 ms 13 ms 14 ms ge0-0-0.ams-ix.ams1.trueserver.nl [195.69.144.16
3]
6 14 ms 14 ms 13 ms ge0-0-0.m20-2.ams1.trueserver.nl [213.239.156.62
]
7 15 ms 19 ms 26 ms ge2-2-0.m40.ams5.trueserver.nl [213.193.237.141]
8 14 ms 14 ms 14 ms ge5-1.bd6808-1.ams5.trueserver.nl [213.239.183.2
22]
9 15 ms 15 ms 15 ms tweakers.net [213.239.154.35]
De trace is voltooid.
Pings zijn goed, maar de doorvoersnelheden zijn om te janken... :)
GlobalEurope
08/12/04, 01:23
Proserve maakt overigens ook gebruik van Eurofiber?
www.eurofiber.nl is ook plat btw.
Het is www.eurofiber.com afaik.
Verder kan dit iedereen gebeuren, ook al heb je 2 glasvezels, als ze beide door zelfde kabel lopen en de hele kabel doorgehakt wordt heb je er nog niets aan.
GlobalEurope
08/12/04, 01:38
Paar jaar geleden hadden ze ook zo'n geintje hier bij sloterdijk, iemand had geen zin om ergens omheen te spitten dus werd besloten om gewoom maar een damwand door de fibers heen te slaan.
Je hebt nog altijd de omgekeerde weg.
Als je EAPS (op extreme) of MRP (foundry) gebruikt reroute je ring vanzelf wel naar de andere kant.
GlobalEurope
08/12/04, 01:53
Klopt, maar ik vermoed dat ze nu in capaciteitsproblemen komen wat eventueel de trage verbindingen kan verklaren.
Nemen ze geen transit ter plekke in redbus af? (of kampen die ook met het fiberprobleem).
CombatServers
08/12/04, 10:27
Btw nog ff vraagje kunnen klanten uit belgie er ook last van hebben gehad??
vooral die van telenet die zaten gister ook teklagen over lagg/choke kan dat er ook mee te maken hebben?
Kan er zeker mee te maken hebben. AFAIK komt de lijn naar de BNIX in TC2 binnen, dus dat verkeer moet over dezelfde link als bv. het AMS-IX verkeer.
CombatServers
08/12/04, 11:21
Origineel geplaatst door clanhost
Kan er zeker mee te maken hebben. AFAIK komt de lijn naar de BNIX in TC2 binnen, dus dat verkeer moet over dezelfde link als bv. het AMS-IX verkeer.
aha ok want skynet heeft nergens last van gehad en telenet klanten wel.
die gingen via:
treuserver.bnix.be
fe0-2-1.m20.ams1.treuserver.nl
wbakker-letsgoonline
08/12/04, 12:34
Nouja gelukkig was trueserver er snel bij en draait alles tenminste, niet super snel nog maar het draait tenminste :)
Origineel geplaatst door CombatServers
aha ok want skynet heeft nergens last van gehad en telenet klanten wel.
die gingen via:
treuserver.bnix.be
fe0-2-1.m20.ams1.treuserver.nl
Volgens mij zitten wij in hetzelfde netwerk CombatServers, en ProServe heeft volgens de netwerklijst een private peering met Trueserver, BE. Lijkt me logisch als het verkeer van een bepaalde provider over die link gaat op gegeven moment ook last krijgt van de kabelbreuk @ Trueserver, NL.
Heeft iemand inmiddels al een officieel statement mbt deze storing? Die zou er nog steeds komen, maar ik geloof dat ze hopen dat we het allemaal weer vergeten...
wbakker-letsgoonline
20/12/04, 10:24
Geachte klant,
Dinsdag 7 december is het netwerk van TrueServer getroffen door de hevigste storing in ons vijf jarige bestaan.
Aangezien wij voor een sluitende verklaring voor de preciese oorzaak van deze storing mede afhankelijk waren van uitleg van onze leveranciers heeft onze verklaring langer op zich laten wachten dan wij in eerste instantie verwacht hadden, onze excuses hiervoor.
Wat er is gebeurd:
Dinsdag 7 december, 15:02: Een deel van onze fibers tussen TeleCity en Redbus valt onverwacht uit. Onze engineers signaleren deze storing direkt. De storing wordt onderzocht en ondertussen vertrekken een tweetal engineers uit voorzorg alvast met vervangende hardware (switches en long-haul optics) naar de twee datacenters om eventueel uitgevallen apparatuur te vervangen.
15:15: Het is duidelijk dat het geen probleem aan onze hardware betreft waarop wij direct onze fiberleverancier benaderen inzake deze storing.
Bij onze leverancier is op dit moment echter nog niks bekend en zij raden ons aan om de patches te controleren. Zowel TeleCity als Redbus engineers onderzoeken dit voor ons, echter blijkt ook hier het probleem niet te liggen.
16:20: na een hectisch uur van onderzoek en noodingrepen komt onze fiberleverancier naar buiten met de mededeling dat het toch, zoals verwacht, een gebroken fiber betreft; een bundel van 48 vezelparen zijn gebroken.
Zodra dit aan het licht komt wordt direkt al het verkeer tussen de twee locaties omgeleid via een andere fiber tussen onze routers en via een fiberring van een collega provider. Gezien de grote hoeveelheid verkeer raakt echter een interface op TeleCity overbelast waardoor verkeer vanaf Redbus richting, voornamelijk, AMS-IX trager is.
+/- 23:50: Onze fiberleverancier geeft door dat de fibers gelast zijn
en weer werken. Uit voorzorg wordt deze vezel eerst uitvoerig getest.
Woensdagochtend, 8 december: De fiber wordt weer in gebruik genomen en
vrijwel al het verkeer loopt weer normaal.
Gisterenmiddag heeft onze fiberleverancier in haar officiele verklaring
laten weten dat de storing lang onopgemerkt is gebleven omdat niet alle
48 vezels gebroken waren. Onder de vezels die intact gebleven waren was
ondermeer degene die gebruikt wordt voor monitoring..
Maatregelen:
TrueServer zal de storing 7 december gebruiken als een wijze les voor
de toekomst. Om dit soort problemen in de toekomst volledig uit te
bannen zullen wij ondermeer de volgende maatregelen nemen:
- De capaciteit qua verbindingen zullen worden verdubbeld;
- Een directe AMS-IX aansluiting op Redbus via long-haul
- Een tweede ring, af te nemen van een andere fiberleverancier, de
noodzaak en haalbaarheid van deze maatregel zijn we op dit moment
grondig aan 't onderzoeken.
Daarnaast staat er nog een pakket maatregelen op stapel waarover we nu
nog geen informatie over kunnen verstrekken. Een en ander zal in ieder
geval inhouden dat soortgelijke storingen definitief tot het verleden
behoren en TrueServer haar positie op het gebied van betrouwbare
netwerken nog verder verstevigt.
Graag willen wij u bedanken voor uw steun tijdens deze hectische dag.
Met vriendelijke groet,
Het TrueServer Netwerk-team
Zeer netjes van Trueserver!
wbakker-letsgoonline
20/12/04, 11:51
dat zeker, mooi dat ze ons (klant) een mail sturen. Hoe het afgelopen is
Ik ben er wat minder over te spreken. Ik vraag me nml nogal af waarom het testen van een vezeltje 9 uur moet duren, en wat er dus gebeurd is tussen 23:50 en de volgende dag rond 9:30 toen alles weer oke was. Ik heb wel mn vermoedens, en dat is dat ze op 1 oor lagen. Vind ik nogal vreemd terwijl je netwerk op apegapen ligt.
Tevens werd (en wordt) er beweerd dat er sprake is van een fiberRING waar RedBus aan hangt, maar als er daadwerkelijk sprake was van een ring, waarom kon het verkeer dan niet de andere kant van de ring langs. Bij onderbreking van een ringnetwerk is er nml altijd een alternatieve route...
Dat de schuld voor deze storing (en zn duur/omvang) grotendeels op Eurofiber afgeschoven wordt is dus naar mijn mening niet terecht.
Origineel geplaatst door DaZe
Tevens werd (en wordt) er beweerd dat er sprake is van een fiberRING waar RedBus aan hangt, maar als er daadwerkelijk sprake was van een ring, waarom kon het verkeer dan niet de andere kant van de ring langs. Bij onderbreking van een ringnetwerk is er nml altijd een alternatieve route...
Als ze ergens in je ring route lopen te graven dan kan er weleens wat mis gaan he 0_o
Ja, maar het hele idee van een ringnetwerk is dat het doorloopt bij fibercuts..