PDA

Bekijk Volledige Versie : Voortgang vervanging Core-Switches



Erwin Zeeuw
26/08/09, 08:25
Beste Relatie,

Op dit moment zijn wij nog bezig met het vervangen van de CoreSwitches te Capelle a/d IJssel. Alle klanten met een heel rack of meer zouden op dit moment al online moeten zijn. Bezig zijn wij nu om alle configuraties voor de halve racks en de losse colocatie klanten uit te voeren om zo snel mogelijk iedereen weer online te brengen!

Wij verzoeken u vriendelijk om op dit moment nog niet naar het storingsnummer te bellen, dit geeft alleen maar vertraging tijdens dit project.

Met vriendelijke groet,

Erwin
Grafix Internet

VinceSTM
26/08/09, 08:34
Ey zeeuw,

Gaat alles volgens planning? Dacht dat jullie eerder klaar wilden zijn?

wonko
26/08/09, 08:43
wat me verbaasd is dat die config niet klaargemaakt werd op voorhand...

Erwin Zeeuw
26/08/09, 08:45
Was helaas niet mogelijk.

Op dit moment zijn we ook klaar met de halve racks. Enkel de losse colo zijn we nu nog mee bezig.

Grt.

Erwin

ccchosting
26/08/09, 10:22
Geachte GrafiX,

Is er al nieuws over onze downtime van nu ruim 9 uur?

Toon
26/08/09, 10:25
Geachte GrafiX,

Is er al nieuws over onze downtime van nu ruim 9 uur?

Wij hadden er 7+ uur, heb net een mail richting GrafiX gedaan, aangezien volgens de aankondiging onze suite niet plat zou liggen omdat quote grafix: 'Relaties die een half of heel rack bij ons afnemen op deze locatie zullen direct bij aanvang van de werkzaamheden worden omgezet naar een tijdelijke switch. Hierdoor zal de downtime beperkt blijven en blijft uw apparatuur bereikbaar tijdens de verdere werkzaamheden gedurende de nacht. '

micado
26/08/09, 11:56
Beste,

Met verbazing lees ik de berichten over de "Voortgang vervanging Core-Switches".

Als reseller van CCCHosting hebben wij nog een server in gebruik die via GrafiX draait.
Dit is nu alweer de tweede keer in zeer korte tijd dat we door een 'foutje' van GrafiX een behoorlijk aantal websites van onze klanten niet bereikbaar zijn. Die klanten zijn qua omzet afhankelijk van hun website.
Ik vind het echt ongelofelijk dat dit niet beter is voorbereid!

Gelukkig hebben we ondertussen eigen servers aangeschaft. Door eerder opgedane slechte ervaringen met GrafiX staan onze nieuwe servers dus bij een ander datacentrum.

Benieuwd hoe lang het nog duurt....

NielsV
26/08/09, 12:02
@ micado: Je zult, mijns inziens, dit met CCCHosting moeten afhandelen...
Als de omzet echt afhankelijk is van de sites, dan zou ik niet afhankelijk willen zijn va 1 partij.

Overigens; Is alles weer terug online ?

JohnnyM
26/08/09, 12:04
Typisch dat er niet eerst een backup switch was geregeld waaraan het in-onderhoud-zijnde-rack wordt gehangen zodat geen netwerk onderbreking nodig was...
Wie is verantwoordelijk voor dit 'project' ?

micado
26/08/09, 12:06
@ NielsV

Je hebt volledig gelijk. Buiten het 'plat liggen' was ccchosting ook erg slecht bereikbaar en gaf geen reactie op fax, email, etc. Dat was ik van Marcel niet gewend en ben blij met zijn schrijven (zie één topi verder).

Wij hebben ondertussen echter eigen servers aangeschaft en die draaien ergens anders.
De ns2 's komen ook fisiek op een andere locatie dan de ns1's.

(Edit): nee, we zijn nog niet online. Al sinds gisteravond niet. Dus nu al 12 uur.

dennis0162
26/08/09, 12:08
geblaat

Je komt hier om te zeiken?
Ik denk eerder dat het aan je webhoster ligt.


@ micado: Je zult, mijns inziens, dit met CCCHosting moeten afhandelen...
Als de omzet echt afhankelijk is van de sites, dan zou ik niet afhankelijk willen zijn va 1 partij.

Overigens; Is alles weer terug online ?


Bij ons is alles al lang terug Online.

NielsV
26/08/09, 12:08
@micado: Sorry had andere topic niet helemaal doorgelezen nog ... !
Succes iig!

WeServIT
26/08/09, 12:12
Beste,

Met verbazing lees ik de berichten over de "Voortgang vervanging Core-Switches".

Als reseller van CCCHosting hebben wij nog een server in gebruik die via GrafiX draait.
Dit is nu alweer de tweede keer in zeer korte tijd dat we door een 'foutje' van GrafiX een behoorlijk aantal websites van onze klanten niet bereikbaar zijn. Die klanten zijn qua omzet afhankelijk van hun website.
Ik vind het echt ongelofelijk dat dit niet beter is voorbereid!

Benieuwd hoe lang het nog duurt....

GrafiX heeft het prima voorbereid, er is een mailing rond gegaan naar alle rechtstreekse klanten met de melding dat de Core-Switches vervangen zullen worden. Als die klanten echt zo afhankelijk zijn van hun websites had je dit beter geregeld en had je gewoon een backup locatie gehad. Die mailing is volgens mij ruim van te voren de deur uit gegaan. Verder zou je, je misschien eens moeten inbeelden hoe stress vol het is als je merkt dat je het onderhoud niet binnen de verwachtte tijd afgerond krijgt, en dan ook nog eens gezeik krijgt van mensen die zelf hun zaakjes niet op orde hebben.

micado
26/08/09, 12:19
@ DennisV en WeServeIT

Erg beleefde reactie van jullie.
Zeker geen eigen bedrijf en behoorlijk wat sites plat? Nee, want alles is bij jullie natuurlijk online.

CCCHosting is weer afhankelijk van GrafiX. Helaas hebben wij van CCChosting géén email mogen ontvangen. Deze update van GrafiX komt voor ons dan ook als een verrassing.

En mijn reactie 'om te zeiken', is dat dus juist.

Een project als waar GrafiX mee bezig is hebben wij al meerdere malen gedaan.
Ik snap dus volkomen de huidige stress.
Het is maar te hopen dat die stress niet zorgt voor fouten....

Trouwens, een project als dit bereid je voor.
Eérst installeer je de nieuwe bekabeling, routers etc.
Dan test je e.e.a en als alles goed werkt zet je de systemen 1 voor 1 over.
Logisch toch dat wij het echt niet leuk vinden uit de lucht te zijn?

CiNNeR
26/08/09, 12:22
GrafiX heeft het prima voorbereid, er is een mailing rond gegaan naar alle rechtstreekse klanten met de melding dat de Core-Switches vervangen zullen worden. Als die klanten echt zo afhankelijk zijn van hun websites had je dit beter geregeld en had je gewoon een backup locatie gehad. Die mailing is volgens mij ruim van te voren de deur uit gegaan. Verder zou je, je misschien eens moeten inbeelden hoe stress vol het is als je merkt dat je het onderhoud niet binnen de verwachtte tijd afgerond krijgt, en dan ook nog eens gezeik krijgt van mensen die zelf hun zaakjes niet op orde hebben.

Wat ik heb begrepen is er een mailtje rondgegaan naar rechtstreekse klanten met o.a.:

Relaties die een half of heel rack bij ons afnemen op deze locatie zullen direct bij aanvang van de werkzaamheden worden omgezet naar een tijdelijke switch. Hierdoor zal de downtime beperkt blijven en blijft uw apparatuur bereikbaar tijdens de verdere werkzaamheden gedurende de nacht. Rond de ochtend zal de uplink naar uw rack wederom kort onderbroken worden en wordt deze verplaatst naar de nieuwe Cisco core-switches.

Er is toch een aardig verschil tussen tijdelijk heen en terug gezet worden of meer dan twaalf uur downtime. En beter hier daarover in discussie raken dan telkens degenen lastig vallen die er mee bezig zijn lijkt me.

WeServIT
26/08/09, 12:27
@ DennisV en WeServeIT

CCCHosting is weer afhankelijk van GrafiX. Helaas hebben wij van CCChosting géén email mogen ontvangen. Deze update van GrafiX komt voor ons dan ook als een verrassing.

En mijn reactie 'om te zeiken', is dat dus juist.



Dat is het probleem van CCC, die hadden gewoon even moeite kunnen doen om die mailing door te zenden. Het zeiken is dan begrijpelijk maar doe je dan niet hier maar gewoon rechtstreeks bij CCC, er werd al in het begin van het topic vermeld dat er een mailing uit gegaan is, de conclusie kun je dan al trekken dat CCC je niet op de hoogte heeft gebracht.

Over het project gesproken, dit zei Erwin: Voorbereide was helaas niet mogelijk. Dit zal ook wel een goede reden hebben mag ik vanuit gaan, GrafiX zal het niet express doen.

micado
26/08/09, 12:31
@ Cinner.

Precies.
Er mag toch zeker discussie worden gevoerd.
Opbouwende kritiek is zeker goed, en als er van wordt geleerd kan dat toekomstige problemen voorkomen.

'Fouten'-management is, om juist van te voren te bekijken wat er eventueel mis kan gaan.

ccchosting
26/08/09, 12:37
GrafiX ondervindt op dit moment problemen met het onderscheiden van de uplinks en daarbij behorende IP ranges naar de switches van CCC Hosting.
(toch handig om vooraf de kabels ff te labelen alvorens deze eruit te trekken?)

Zojuist hebben wij grafix via WHT (hun eigen mail server ligt ook nog plat) een mail gestuurd met al onze gebruikte uplinks, racks en daarbij behorende IP ranges.
Wij hebben GrafiX vooralsnog geadviseerd dan maar nieuwe/tijdelijke uplinks neer te leggen naar onze racks zodat de boel snel weer online kan.
(inmiddels al meer dan 11 uur down)

Betreffende de mailling van de aankondiging van deze onderhoudt:
Deze maillings zijn wel degelijk door gestuurd door ons, echter blijkt vandaag dat deze niet zijn aangekomen.
Wij zullen dit (nadat alles weer online is en de rust een beetje is terug gekeerd) onderzoeken, wij wisten dat er wel een probleem met de mailing software was maar deze trad alleen op wanneer wij maillings versturen naar +2000 klanten, echter blijkt nu dat er dus kennelijk iets meer aan de hand is met onze uitgaande maillings.

micado
26/08/09, 12:43
@ CCCHosting.

Marcel,

Dank je voor de update.
Jammer dat wij geen mail hebben mogen ontvangen.
Dat had heel wat ergernis gescheeld, want dan hadden wij dit weer aan onze klanten kunnen laten weten.
Ondertussen worden wij door de klanten ook redelijk plat gebeld.

Hopelijk doet GrafiX extra hun best en zijn jullie / wij weer snel online.

Trouwens: kun je me (eventueel telefonisch) even laten weten op welke server wij zitten?
Handig om via jouw website de server status in de gaten te houden. :-)

CiNNeR
26/08/09, 12:46
GrafiX ondervindt op dit moment problemen met het onderscheiden van de uplinks en daarbij behorende IP ranges naar de switches van CCC Hosting.

@WeServIT: Me dunkt dat het eerder om dit soort problemen gaat. Niet de eerste keer dat er meer mis gaat dan het groot onderhoud alleen.

machit
26/08/09, 12:51
Ik vind het erg knap wat de mannen van Grafix tot nu toe gepresteerd hebben... Ze hebben wel even een heel datacenter omgeprikt. Wij zijn sinds 7 uur vanmorgen al weer probleemloos online!

Het probleem van CCC Hosting is denk ik een uitzondering! En ik vind dat CCC Hosting ook nalatig is geweest als deze hun klanten niet op de hoogte hebben gebracht van dit onderhoud...

thatcher
26/08/09, 13:09
@ccchosting

Spijtig dat deze onverwachte downtime zo lang duurt. Dit kost mij klanten. Graag wil ik verzoeken niet de co-located machines te vergeten!

Thatcher, Koffiedik

ccchosting
26/08/09, 13:30
Geachte,

Er wordt gesuggereerd dat de bekabeling een puinhoop zou zijn?
Wanneer grafix de netwerk bekabeling had genummerd of gelabeld hadden deze zo direct terug geprikt kunnen worden in de nieuwe core switches van GrafiX.

Hierna de patch poort configureren met de IP ranges die gebruikt worden en de boel is up.
Het verbaast ons dat grafix hier problemen mee ondervindt, men weet toch welke ip ranges er zijn geconfigureerd op de oude poorten van de core switches, wanneer men ook de bekabeling nummert weet men welke uplink in welke poort zat, dus weet men ook welke ip range daar aan vast hoort te zitten.

Is het nu ineens ons probleem geworden?
Waar is Michiel Klaver?

Imiddels meer dan 12 uur offline!

Dirkje
26/08/09, 13:33
Marcel, ik wil graag even wijzen naar het patchrack op de datavloer op de 1e verdieping. Daar is weinig kabelmanagement te vinden.

MAAR, ik zie de laatste tijd wel vooruitgang bij GrafiX CPL omtrent veiligheid en het opknappen van het pand intern.

ccchosting
26/08/09, 13:41
Men trekt onze stekkers eruit!
Dan dient men ook in de gaten te houden waar en hoe deze zaten!

Boven dien, omdat de patch kabels los hangen tussen onze switches en servers heeft NIETS maar dan ook NIETS te maken met onze uplink!

Bovendien, ik heb ze nu een uur gelden gemaild met welke switches, racks welke ranges gebruiken.
Waarom wordt er geen nieuwe kabel neer gelegd, in de switch geprikt en in de core switch, IP configureren en alles is UP, aan de hand van de mail die ik ze gestuurd heb zou dit pfff 30 minuten werk zijn, incl. ff nieuwe patch kabels knippen en maken.

Sorry hoor, maar CCC Hosting stelt zich hier ABSOLUUT niet voor aansprakelijk!
(p.s staan op de bijgaande grond)
En Waar is Michiel Klaver eigenlijk gebleven?

Inmiddels bijna 13 uur offline!

En oja, ARCO, we komen eraan, nog enkele weken geduld.
(zijn nog ff bezig met voorbereidingen voor onze reorganisatie van ons serverpark)

micado
26/08/09, 13:55
Momenteel worden wij behoorlijk veel gebeld door klanten waarvan de website nog steeds niet bereikbaar is.

Dit heeft een waterval of rimpel effect als gevolg:
- die klanten zijn niet per email bereikbaar:
krijgen dus geen mail binnen van hun klanten, kunnen er dus ook niet op antwoorden, waardoor het lijkt of ze geen email beantwoorden
- de websites liggen plat dus ook bestellingen kunnen niet gedaan worden

En buiten het feit om of wij via ccchosting nu wél of geen email hebben gehad ter waarschuwing: uiteindelijk is degene die gaat ompatchen toch verantwoordelijk voor het verdere verloop.

Ik zal vast verklappen dat er reeds twee advocaten en diverse andere grote bedrijven (onze klanten) van plan zijn een claim voor te bereiden.
Micado BV zal hen doorverwijzen naar de verantwoordelijke partij.

Als ccchosting een claim gaat neerleggen, sluiten wij ons daar graag bij aan.


Wij stellen voor dat GrafiX zo snel mogelijk, eventueel op aanwijzingen van CCChosting, alles in de oude staat terug brengt, óf in staat moet zijn bekabeling te gaan meten en goed patchen.

GrafiX: kunnen jullie via dit topic de status laten weten?
Bij voorbaat dank.

(Edited 13:00): grafix.nl is ook onbereikbaar. Echt uitstekend geregeld!

Stewie
26/08/09, 14:06
micado, uiteindelijk kan je maar bij één partij terecht en dat is jouw eigen colocatie leverancier. Of dat Grafix is, CCChosting, of een andere partij weet ik niet. Maar de typische WHT dreigverhaaltjes lossen niets op. Er zijn al teveel verhaaltjes over advocaten en gigantisch grote klanten geweest die bij een klant van een klant van een klant van het datacenter klant zijn en dan met grote mond verkondigen dat ze het datacenter gaan aanpakken.
Net als CCCHosting die de verantwoordelijkheid afschuift. Natuurlijk begrijpelijk, ze hebben geen invloed op de situatie. Maar zo laat je zien dat je wel erg wanhopig bent naar de eigen klanten toe. Communiceer met Grafix, houdt de klanten goed op de hoogte en werk naar de oplossing.

Er is maar één partij en dat is jouw contractpartij.

micado
26/08/09, 14:11
@Stewie:

Dat ligt er maar aan.
Als er een gat in de weg zit kun je de gemeente aansprakelijk stellen, of direct naar de Provincie gaan.
Ligt er maar net aan wie eindverantwoordelijk is.

In dit geval is de hosting weliswaar via CCCHosting, maar die heeft de stekkers er niet uit getrokken. Dat heeft Grafix gedaan.

marsipulami
26/08/09, 14:13
jij dient dan de claim aan CCC voor te leggen, en zij kunnen die doorschuiven naar grafix. Je laat jou klanten toch ook niet naar Grafix gaan? Zij hebben met jou te maken

DennisWijnberg
26/08/09, 14:14
@Stewie:

Dat ligt er maar aan.
Als er een gat in de weg zit kun je de gemeente aansprakelijk stellen, of direct naar de Provincie gaan.
Ligt er maar net aan wie eindverantwoordelijk is.

In dit geval is de hosting weliswaar via CCCHosting, maar die heeft de stekkers er niet uit getrokken. Dat heeft Grafix gedaan.

Ken je het verschil tussen civiel- en bestuursrecht? Uiteindelijk valt het beide onder de "Nederland BV". (let op de quotes). Bij civiele procedures heb je ex contractu alleen te maken met het persoon waar jij een overeenkomst mee hebt.

micado
26/08/09, 14:17
@ marsipulami & Dennis Wijnberg:


Uiteraard hebben mijn klanten met ons bedrijf te maken.
Wij sturen immers de facturen.

Maar stel je de rechtsgang eens voor als een klant van een klant van een klant een ieder een claim gaat sturen, en weer doorsturen, en weer doorsturen? Dan lijkt het wel een HOAX.
Dat is overbelasting voor de rechtbank, die er niet blij mee zullen zijn.

Vergelijk het met een kettingbotsing: de veroorzaker (de voorste?) zal uiteindelijk de claims krijgen.

Trouwens: ik ben geen jurist. heb er wel een aantal in mijn directe netwerk.

DennisWijnberg
26/08/09, 14:18
Vergelijk het met een kettingbotsing: de veroorzaker (de voorste?) zal uiteindelijk de claims krijgen.

Standaard is de auto die achterop rijdt schuldig ;)

micado
26/08/09, 14:19
@ DennisWijnberg:
Zo zie je maar hoeveel verstand ik er van heb! :O

CiNNeR
26/08/09, 14:20
Misschien kan de juridische discussier ergens anders gevoerd worden? Anders is dit topic straks ook op slot en ik zou graag de updates willen volgen met betrekking tot GrafiX en de nu spelende storing.

GangaWebb
26/08/09, 14:21
Enig update van Grafix?

CiNNeR
26/08/09, 14:22
Zie zojuist bij CCCHosting dat Grafix het te druk had om de problemen op te lossen(??) maar nu ermee bezig zijn. Sorry, meer kon ik ook niet van het bericht maken.

ccchosting
26/08/09, 14:24
CCC Hosting heeft verschillende uplinks met verschillende IP ranges.
GrafiX is ervan uit gegaan (vermoedelijk) dat CCC Hosting 1 uplink had met daaroverheen alle IP ranges en wij deze zelf door stuurde naar de verschillende racks.

In dat geval kan grafix roekeloos de uplinks eruit trekken, vervolgens kabeltje volgen die naar rack van CCC Hosting leidt en daarna alle ip ranges configureren op dat ene uplink kabeltje.

Echter, dat hebben wij dus niet, ik ga trouwens niet in discussie waarom wij dat niet hebben of waarom wij dat anders hebben.
In dit geval is het voor grafix dus een puzzel welke uplink welke ip ranges bevatten en naar welke racks deze gaan, dit wordt teven bemoeilijkt door het vrijwel onmogelijk volgen van de kabels onder de vloer (in ons geval)

Wanneer Grafix de uplinks voordat men deze eruit trokken hadden gelabeld en geadministreert had heel dit probleem zich niet voor gedaan, en had men aan de hand van de labels de kabels zo kunnen terug prikken, in de administratie controleren welke IP ranges hier aan hingen, opnieuw configureren en de boel was up.

Maar goed, nogmaals dit zijn mijn bevindingen en gedachten.
Uiteraard staat GrafiX vrij hierop te reageren, en te zeggen hoe ze deze vervanging van de routers hebben ingepland en geadministreerd.

micado
26/08/09, 14:25
Zie inderdaad dat CCChosting een bericht heeft staan:

http://www.ccchosting.nl/helpdesk/index.php?_m=news&_a=viewnews&newsid=15

Kennelijk gaat het maar om 4 uplinks?

Maar waarom is www.grafix.nl (http://www.grafix.nl) onbereikbaar?

Voxio
26/08/09, 14:28
Maar waarom is www.grafix.nl (http://www.grafix.nl) onbereikbaar?

http://www.webhostingtalk.nl/netwerk-storingen-en-updates/152453-ccchosting-plat-door-grafix-onderhoud-2.html#post1082206

Dirkje
26/08/09, 14:28
CCC Hosting heeft verschillende uplinks met verschillende IP ranges.
GrafiX is ervan uit gegaan (vermoedelijk) dat CCC Hosting 1 uplink had met daaroverheen alle IP ranges en wij deze zelf door stuurde naar de verschillende racks.

In dat geval kan grafix roekeloos de uplinks eruit trekken, vervolgens kabeltje volgen die naar rack van CCC Hosting leidt en daarna alle ip ranges configureren op dat ene uplink kabeltje.

Echter, dat hebben wij dus niet, ik ga trouwens niet in discussie waarom wij dat niet hebben of waarom wij dat anders hebben.
In dit geval is het voor grafix dus een puzzel welke uplink welke ip ranges bevatten en naar welke racks deze gaan, dit wordt teven bemoeilijkt door het vrijwel onmogelijk volgen van de kabels onder de vloer (in ons geval)

Wanneer Grafix de uplinks voordat men deze eruit trokken hadden gelabeld en geadministreert had heel dit probleem zich niet voor gedaan, en had men aan de hand van de labels de kabels zo kunnen terug prikken, in de administratie controleren welke IP ranges hier aan hingen, opnieuw configureren en de boel was up.

Maar goed, nogmaals dit zijn mijn bevindingen en gedachten.
Uiteraard staat GrafiX vrij hierop te reageren, en te zeggen hoe ze deze vervanging van de routers hebben ingepland en geadministreerd.

Komen de VLANs bij jullie getagged binnen? Anders taggen ze gewoon al jullie VLANs op alle uplinks en je bent klaar. Het blijft dan nog een puinhoop, maar je draait in ieder geval weer.

ccchosting
26/08/09, 14:42
Sommige IP ranges komen getagged binnen, andere weer niet.
Inmiddels zie ik rack 2.11 en rack 4.8 weer online (84.243.219.0/24)

Momenteel wordt er nog gekeken naar rack 2.13 en rack 2.14

We boeken vooruitgang..

ccchosting
26/08/09, 15:50
Downtime inmiddels bijna 15 uur.
Wij hopen dat Grafix alle problemen (ook die van andere) zo snel mogelijk weet op te lossen.

GangaWebb
26/08/09, 15:52
volgens de laatste update op de website van CCC, heeft GrafiX het blijkbaar druk met meerdere problemen... (waaronder hun eigen website???)

Het is te gek voor woorden dat x aantal servers al meer 12+ uur down zijn en blijkbaar geen hoge prioriteit hebben omdat ze bezig zijn met een ander probleem.... Ik vraag me af of dat andere ook ouder is dan 12+ uur.

Ik weet niet wie uiteindelijk hiervoor gaat draaien, maar een claim kunnen ze verwachten voor de downtime.

machit
26/08/09, 15:55
volgens de laatste update op de website van CCC, heeft GrafiX het blijkbaar druk met meerdere problemen... (waaronder hun eigen website???)

Het is te gek voor woorden dat x aantal servers al meer 12+ uur down zijn en blijkbaar geen hoge prioriteit hebben omdat ze bezig zijn met een ander probleem.... Ik vraag me af of dat andere ook ouder is dan 12+ uur.

Ik weet niet wie uiteindelijk hiervoor gaat draaien, maar een claim kunnen ze verwachten voor de downtime.

Het is natuurlijk erg vervelend om zolang down te zijn.. Alleen is er helaas iets meer aan de hand dan een paar serverstjes! GrafIX kennende heeft alles prioriteit, maar een mens heeft maar 2 handen....

Kijk liever even oplossingsgericht ipv gelijk te komen met claims... laat die mensen hun werk doen en de rest komt later wel? Je hebt toch meer aan dat het terug online is dan dat je claim indient? :thumbdown:

GangaWebb
26/08/09, 16:10
Het is natuurlijk erg vervelend om zolang down te zijn.. Alleen is er helaas iets meer aan de hand dan een paar serverstjes! GrafIX kennende heeft alles prioriteit, maar een mens heeft maar 2 handen....

Kijk liever even oplossingsgericht ipv gelijk te komen met claims... laat die mensen hun werk doen en de rest komt later wel? Je hebt toch meer aan dat het terug online is dan dat je claim indient? :thumbdown:

True, maar gezien het feit dat zowel website & mail verkeer ook plat ligt, kan je niet alles doen. Ik hoop dat ze inderdaad met Prio's werken. Tenminste dat doen grote bedrijven toch?

Wanneer een prio ticket voor een outage wordt aangemaakt (ook al is het onstaan door een netwerk upgrade) blijft het een outage. Eens?

In de normale helpdesk wereld die verbonden is aan SLA's escaleren tickets hoe langer ze open staan. Dus ik zeg niet dat ze alleen een paar server outages aan hun hoofd hebben, maar niet eerst zeggen dat je ermee bezig bent, en later zeggen dat je moet wachten omdat "we" met iets anders bezig zijn.

Ik heb ook 2 handen, iedereen volgens mij. de vraag is zijn er echt alleen 2 handen beschikbaar voor de GrafiX netwerk ?

En met alle huidige vrije tijd is het geen extra moeite om een claim voor te bereiden toch ?;)

JohnnyM
26/08/09, 16:13
Waarom heeft CCC-hosting niet zelf al hun backup ISP benaderd?

BsHosting
26/08/09, 16:19
Misschien is dat beter omdat aan CCC zelf te vragen he, of moeten wij hier Lingo gaan spelen met zijn allen.

Als CCC je provider is moet je daar om antwoorden vragen.

The-BosS
26/08/09, 16:23
volgens de laatste update op de website van CCC, heeft GrafiX het blijkbaar druk met meerdere problemen... (waaronder hun eigen website???)

Het is te gek voor woorden dat x aantal servers al meer 12+ uur down zijn en blijkbaar geen hoge prioriteit hebben omdat ze bezig zijn met een ander probleem.... Ik vraag me af of dat andere ook ouder is dan 12+ uur.

Ik weet niet wie uiteindelijk hiervoor gaat draaien, maar een claim kunnen ze verwachten voor de downtime.

Downtime is er en kan niks aan veranderd worden, maar werken zijn aangekondigd en vallen dus buiten een SLA regeling. Je downtime gaat dus eigenlijk in op het moment dat volgens grafix de werken voltooid zou moeten zijn (+- nog een uurke respijt). En als we vanaf deze periode rekenen val je volgens mij nog steeds binnen de verplichte SLA uptime. Met andere woorden een claim opstellen zal niet veel uithalen. Idem voor eventuele klanten die je host, tenzei jij ze bvb 99,99% uptime belooft terwijl je er zelf bvb maar 99,50% krijgt.

En om even terug te komen op het bezig zijn met andere dingen, misschien is er een klant die 10 keer groter is met een SLA contract van 99,99% uptime met on-hands binnen de 3 uur. Dan lijkt het me logisch dat ze een klant die iets wat minder is in SLA contract even laten wachten. Ik zeg daarom niet dat het zo is, maar ik geef maar sugestie waarom het zou kunnen zijn.

ccchosting
26/08/09, 16:24
Waarom heeft CCC-hosting niet zelf al hun backup ISP benaderd?


De boel omzetten (praten hier in grafix alleen al over +/- minus 7000 websites) regel je niet in 1 dag, maar denk hierbij aan weken.
Overigens zijn wij al weken bezig met een zeer grote reorganisatie van ons serverpark, deze zal vanaf virtuele servers worden gaan gehost.
Enkele voordelen: kosten, makkelijker/sneller restoren bij crashes, betere load verdeling, bij overbelasting makkelijk te verhelpen, andere lokatie, etc etc.

Meer informatie volgt per mailling.
(zodra de problemen met de mailling software zijn verholpen)

GangaWebb
26/08/09, 16:28
@ The-BosS

Alinea 1 : neem aan dat de werken + - uurtje respijt niet 15+ uren zijn :)
Alinea 2 : eens en kan idd een mogelijkheid zijn!

BsHosting
26/08/09, 16:31
Zoals al vermeld werd dit is aangekondigd onderhoud dus een claim kan jij vergeten.
Jij moet bij je eigen leverancier zijn.

ccchosting
26/08/09, 16:34
@ GangaWebb

In princiepe kan de range 84.243.235.0/24 alwaar jouw websites in bevinden in 15 a 30 minuten weer up zijn.
Echter, hiervoor moet men ff een tijdelijke uplink kabel aanleggen (bovengronds) van de coreswitch naar onze switch.
Wij hebben al deze informatie en tips door gemaild naar grafix en telefonisch besproken.

Waarom dit niet gebeurt en men het ondervloers uit zoekt, of andere klanten tussendoor helpt kan ik helaas geen antwoord op geven..

Dit antwoord zullen wij morgen of zodra de rust is weder gekeerd stellen aan Marco van G. (eigenaar GrafiX B.V)

Tot deze tijd kunnen wij alleen maar hopen dat de medewerkers van GrafiX in staat is alle problemen tijdig te verhelpen.

@ BsHosting
In de aankondiging werd niet vermeld dat deze onderhoud (nu al bijna) 16 uur zou duren.
Tevens werd er aangeven dat klanten met halve racks en hele racks (wij 4 racks) direct zouden worden over gezet naar een tijdelijke switch om lange downtimes te voorkomen.
Je hoort mij hier niet schelden of dreigen (al is het zwaar me in te houden) maar ik weet wel dat er hier sprake is van een steekje laten vallen, met als gevolg 16 uur downtime, terwijl wanneer er meer (technisch) personeel zou zijn zou dit probleem snel(ler) zijn opgelost.

Markuz
26/08/09, 16:36
@ccchosting, puur uit nieuwsgierigheid, maar blijven jullie bij deze partij staan?

ccchosting
26/08/09, 16:40
@ccchosting, puur uit nieuwsgierigheid, maar blijven jullie bij deze partij staan?

Zoals iedereen weet hebben wij al geruime tijd plannen om onze servers bij Nedzone onder te brengen.
Niet vanwege het feit dat wij ontevreden waren of zijn over GrafiX, maar vanwege financieel oogpunt.
Zie ook ons bericht enkele berichten terug i.v.m reorganisatie.

O.T

The-BosS
26/08/09, 16:40
@ The-BosS

Alinea 1 : neem aan dat de werken + - uurtje respijt niet 15+ uren zijn :)
Alinea 2 : eens en kan idd een mogelijkheid zijn!

Als men bvb werken aankondigd die bvb van 20u tot 8u zullen duren en jouw server bvb pas om 10u werkt ben je volgens SLA maar 2u down geweest. Niet 14u omdat deze werken op voorhand meegedeeld waren en dus niet in een SLA regeling vallen, en hierdoor de 2u echte downtime nog steeds binnen een normale SLA kan vallen.

Dus vooraleer je met claims en process etc aankomt lopen zou ik iedereen toch eens aanraden om contracten en SLA's goed door te lezen, want om het in CCChosting zijn voorbeeld te stellen. In een normaal SLA contract staat meestal vermelding dat men niet aansprakelijk is door fouten veroozaakt door 3den. Dus klanten van CCChosting hebben eigenlijk geen poot om op te staan aangezien fout door 3den (in dit geval grafix) veroozaakt is.

Ik vindt het triest dat hier meestal klanten van klanten van klanten over een datacenter kwaad komen spreken terwijl 9op10 de fout bij hun hoster zit. Of het nu slechte communicatie is of slecht management is maakt niet veel uit. Indien men bvb een mailing naar klanten zou doe en bvb bericht op status pagina, klantenbeheer, ... zou zetten moet men ook niet afhankelijk zijn van 1 media voor inlichten, zo kan men bvb voor grote werken die op tijd aangekondigd zijn ook een nota op factuur zetten of gewoon een volledige uitleg bijvoegen op apparte pagina.

BsHosting
26/08/09, 16:41
In de aankondiging werd niet vermeld dat deze onderhoud (nu al bijna) 16 uur zou duren.
Tevens werd er aangeven dat klanten met halve racks en hele racks (wij 4 racks) direct zouden worden over gezet naar een tijdelijke switch om lange downtimes te voorkomen.


Nee dat snap ik maar je geeft zelf al aan dat jullie servers op een andere manier waren aangesloten.
Dit kan dus e.e.a wel verklaren lijkt me zo als het onderhoud wel is afgerond.

Vraag blijft dus waren hun op de hoogte van je speciale constructie of gaan ze uit van iets standaards.

Misschien een tip zelf daar heen gaan en je kabels zelf goed aansluiten.

Succes in ieder geval.

Moc
26/08/09, 16:45
Sorry hoor maar ik vind dat het nu echt wel ver zat gaat.
CCChosting, natuurlijk is het enorm :thumbdown: dat je al een zo lange downtime hebt, dat is uiteraard begrijpelijk. Maar het helpt echt niet om nu op dit moment te gaan beginnen met een claim (dit is naar eigen inziens voor latere tijdstippen natuurlijk wel mogelijk). Ik neem aan dat je hoogste prioriteit ligt op het oplossen van dit probleem, en ik neem aan dat de mensen bij Grafix ook zeker hun best doen om dit op te lossen.

Dan zeg je ook nog dat je 'mij niet hebt horen dreigen', sorry hoor maar een claim vind ik toch echt wel dreigen.
Ook aan alle klanten van CCChosting wil ik vragen om af te wachten en updates te lezen op de website van CCChosting (die vaak genoeg geupdate wordt zoals ik al heb gezien) en niet hier gaan reageren met speculaties en nog meer van die troep.

Op dit moment is dit topic voor het grootste deel gebruikt voor het probleem tussen Grafix en CCChosting. Kan iedereen bij wie de provider CCCHosting is gewoon met de provider een discussie aangaan, dit hoeft echt niet via WHT te gaan. Dit topic is bedoeld voor updates m.b.t de vervaning van de core-switches, niet voor updates m.b.t. het probleem tussen Grafix en CCChosting.

Er zijn hier meer mensen die het onderhoud bij Grafix willen volgen ipv een andere bovengenoemde discussie. Dus laten we het daarbij ook houden, voordat de mods genoodzaakt zijn om hier een slotje op te zetten!

Bedankt.


EDIT: excuses richting ccchosting, het was micado die de claim aankondigde. Toch blijft mijn uiteindelijke boodschap onveranderd.

ccchosting
26/08/09, 16:53
Nee dat snap ik maar je geeft zelf al aan dat jullie

Vraag blijft dus waren hun op de hoogte van je speciale constructie of gaan ze uit van iets standaards.

Misschien een tip zelf daar heen gaan en je kabels zelf goed aansluiten.

Succes in ieder geval.


Vreemde constructie?
Er zullen ongetwijfeld meer klanten/providers zijn die verschillende uplinks hebben met verschillende IP ranges.
Uiteraard zou het achteraf makkelijker (voor grafix) zijn geweest als wij maar 1 uplink hadden met hierover alle IP ranges.
Wij hebben overigens een tijd gelden dit getracht in te stellen, echter werkte de glasmodules op dat moment niet mee..

Het probleem is mogelijk ontstaan doordat er niet gedocumenteerd is welke kabels in welke poorten zaten en welke vlans en ip ranges hierop zaten.
(deze informatie heb ik om 11:25 door gemaild naar GrafiX)

Verder wil ik erop wijzen dat Michiel v. K, hiervan op de hoogte was, dit geen enkel probleem vond of problemen voorzag, en Michiel v. K altijd bij problemen met onze uplinks snel en accuraat heeft geholpen.
Zijn het niet ik het idee heb dat Michiel vanacht hard heeft gewerkt en momenteel op 1 oor ligt (en geef hem eens ongelijk)


Ik heb telefonisch en per mail contact met grafix, heb ze gezegd wat te doen.
Naar het datacentrum toegaan heeft geen zin, is overbodig, kind kan de was doen en ik kan toch die coreswitch niet configgen, en ga ook niet onder de vloer kruipen met als gevolg dat ik andere kabels los trek of beschadigd, dit is niet mijn werk.


EDIT: dank moc voor je aanpassing..
Marcel gaat ff een bak koffie halen, grafix bellen en voorlopig maar weer afwachten, en klanten te woord staan.

martysmarty
26/08/09, 17:25
@ccchosting: even een kabeltje 30 minuten ja, maar als ze 10 klanten hebben die belangrijker zijn dan jullie, die dat ook moet hebben, ben je al 5 uur verder.

Tevens. In al deze tijd dat je hier aan het klagen bent, waarom ben je zelf niet naar het datacentrum gegaan om te kijken of je kunt helpen je eigen racks online te krijgen? Bij zulk belangrijk onderhoud zou ik er altijd voor zorgen dat ik naar het DC toe kon gaan, in geval van problemen.

CiNNeR
26/08/09, 17:26
@MartySmarty: er staat al enkele keren vermeld dat het voor CCCHosting geen zin heeft om naar het datacentrum te gaan en waarom niet.

Vind het verder een beetje flauw om telkens naar CCCHosting te kijken alsof die over niets klagen. De problemen zitten nu bij GrafiX tenslotte.

machit
26/08/09, 17:28
@MartySmarty: er staat al enkele keren vermeld dat het voor CCCHosting geen zin heeft om naar het datacentrum te gaan en waarom niet.

Jazeker heeft dit wel zin! Als er daadwerkelijk een kabel gelegt moet worden, dan kan CCC Hosting dit toch ook even snel doen? Ik ben hier heel de dag al aanwezig, maar heb nog niemand van CCC Hosting gezien.

Buiten dag: Zoals een modje al aangaf; dit topic is voor updates voor het core-switch onderhoud. CCC Hosting staat hier los van...

CiNNeR
26/08/09, 17:32
Jazeker heeft dit wel zin! Als er daadwerkelijk een kabel gelegt moet worden, dan kan CCC Hosting dit toch ook even snel doen? Ik ben hier heel de dag al aanwezig, maar heb nog niemand van CCC Hosting gezien.

Zover ik heb begrepen liggen de kabels er gewoon, is men alleen vergeten welke kabel waarvoor is. En denk niet dat Grafix zit te wachten op derden die zelf even kabeltjes komen trekken.


Buiten dag: Zoals een modje al aangaf; dit topic is voor updates voor het core-switch onderhoud. CCC Hosting staat hier los van...

Zover ik kan zien is dit nog steeds een uitloper van het core-switch onderhoud. Daar hebben klanten last van, die toevallig bij CCCHosting zitten. We zitten allemaal op hetzelfde te wachten, oplossingen bij GrafiX en eventueel een update wat er gaande is.

micado
26/08/09, 17:37
En we zijn weer online.... net als vele anderen nu!

CCCHosting: bedankt voor de vele updates op je website.

Verder zijn we benieuwd of GrafiX nog wat gaat meedelen op dit topic.

Collegea webhosters: thankx voor de discussie.

ccchosting
26/08/09, 17:48
Mag ik erop wijzen dat wij (best veel nog) betalen voor de afgenomen diensten in GrafiX DC?
Wanneer ons wordt toegezegd per telefoon en mail dat men bezig is met het probleem ga ik niet in de auto stappen, maar ga ervan uit dat het snel verholpen wordt.
In dat geval had grafix moeten zeggen dat ze mankracht te kort kwamen en mij moeten vragen om langs te komen om te helpen.
Hiernaast moet ik alle klanten die bellen en voicemails inspreken terug bellen, wij zijn hier met 2 man de hele dag al mee bezig, en zijn nog lang niet klaar, dus geven wij deze werkzaamheden uit aan handen aan GrafiX, jammer dat het zo lang heeft moeten duren.
Wanneer wij dit van te voren weten hadden we allang op de datavloer gestaan.

Afijn, Inmiddels is vrijwel bijna alles online, rest nog 1 colocatie klant, maar wij houden dit in de gaten.
Wij zullen morgen of van de week de heer van Gink vragen naar zijn reactie op onze bevindingen van vandaag en zullen deze reactie dan ook door spelen naar onze gedupeerde klanten.

Voor tot nu toe wil ik iedereen en ook de medewerkers van Grafix bedanken voor de genomen moeite.
Ik kan me namelijk wel voorstellen dat men daar ook met de handen in het haar hebben gezeten, en dat wij absoluut niet de enigste zijn met grote problemen.

Edit: zojuist gebeld door Grafix
Verochten mij/ons even langs te komen i.v.m de laatse uplink, hmm, kennelijk naar aanleiding van dit bericht:ohmy:
Inmiddels onderweg:cool:

Erwin Zeeuw
26/08/09, 19:17
Inmiddels zou iedereen online moeten zijn, ik ben al de hele dag heen en weer aan het vliegen en heb iedereen zo snel mogelijk geholpen!

Ook CCC hosting, een van onze klanten, is ondertussen weer online. Dit na het uitzoeken van alle kabels en interne patches tussen de CCC Hosting racks.

Groeten,

Erwin

VinceSTM
26/08/09, 21:59
wat je had kunnen leren van dit onderhoud:

Altijd in overleg gaan met je ISP! Mijn aanbieder had dit van te voren uitermate goed doorgesproken met Grafix en ik heb dus ook nauwelijks gevolgen ondervonden van het onderhoud.

dennis0162
26/08/09, 23:24
Alles is opgelost. Dit topic kan dicht.