Bekijk Volledige Versie : Scarlet Vilvoorde blijft voor problemen zorgen
Hallo Iedereen,
Er zijn blijkbaar weer problemen bij Scarlet,weet er al iemand wat het probleem zou kunnen zijn?
Bedankt voor jullie hulp!
Groeten,
Igor d'heedene
Inderdaad, dit is wel ZEEER erg!!!
EasyHost status pg zegt weer stroomproblemen
http://status.easyhost.be/
Had het wel kunnen denken...
Stroompanne in het datacenter. Maar weet ik nog niet. Kreeg net een alert binnen op mijn GSM van Site24x7.
Bron: status.easyhost.be (http://status.easyhost.be)
Daar gaat de uptime van deze maand al weer :(
Dit wordt nu toch echt wel te gek voor woorden...
Is dit de derde maal in 2 weken?
Klopt, 3e maal in 10 dagen, 4e maal in 10 maand
Is dit de derde maal in 2 weken?
Klopt:
kort overzichtje:
1e maal: Zaterdag 25/04
2e maal: Woensdag 29/04
3e maal: Dinsdag 05/05
het is terug onilne precies?
GlobalServe
05/05/09, 18:08
Terug sterkte aan iedereen die daar zit.
Ik denk niet dat ze het door hebben bij Scarlet dat er wel degelijk iets mis is.
Ze hebben echt geen zin om aan een oplossing te werken...
Vrees dat het gaat van mis management maar onkunde of know-how.
Scarlet zelf is blijkbaar al terug online na 40 minuten. Maar vermoed dat de 3rd party servers binnen enkele minuten ook weer zullen opstarten.
Hallo,
Bedankt voor jullie snelle antwoorden,scarlet werkt al terug maar easyhost waar onze site ook is gehost is nog altijd down.
Bij ons is alles terug online intussen (wij zitten in Zaal 3)
Ook Easyhost zelf is terug online intussen:
(update 17:10) Scarlet bevestigt dat het stroomprobleem dezelfde oorzaak heeft als het probleem van 29 april. Meer updates komen er straks nog aan
(update 17:15) Er is opnieuw stroom, maar om hardwareproblemen ten gevolge van plotse stroomtoevoer te vermijden, zullen de zekeringen systematisch heractiveerd worden. Alle systemen zullen op erg korte termijn terug online komen
Als de oorzaak dezelfde is dan vraag ik me toch af waarom ze die oorzaak niet meteen hebben aangepakt, en waarom ze niet voor een stabiele noodoplossing hebben gezorgd...
Hallo,
Bedankt voor je hulp,alles is terug werkende.
alles werkt terug, en dus op slot - discussies worden maar ergens anders verdergezet...
Update: terug open, aangezien scarlet blijkbaar er de stroom terug afgehaald heefT...
GlobalServe
05/05/09, 19:07
(update 18:00) Om het probleem verder op te lossen heeft Scarlet besloten om de stroom terug af te sluiten. Hoe lang dit zal duren is momenteel niet duidelijk, maar wij zullen deze informatie meteen posten
(update 18:20) Scarlet kan nog geen specifiek tijdstip geven wanneer ze het datacenter terug offline zullen halen. Dit kan plots gebeuren en spijtig genoeg zonder aankondiging. Wij raden klanten aan om hun servers online te houden aangezien het nog een tijdje kan duren vooraleer we opnieuw down gaan
Dit slaat toch echt wel alles...
Zonder aankondiging down? Als ik daar klant was zou ik dus NU snel backups maken van de belangrijke servers.
Hmmm ik snap het niet meer :)
Scarlet.be is down, easyhost.be is wel nog online
Onze servers al 2u30 offline ondertussen...
vincentvdk
05/05/09, 20:24
Nog een paar van die leuke stunts en we kunnen daar HD's verzamelen....
Tim.Bracquez
05/05/09, 20:28
Zonder aankondiging down? Als ik daar klant was zou ik dus NU snel backups maken van de belangrijke servers.
Of indien mogelijk snel enkele bedrijven opbellen voor colo, naar daar rijden en het boeltje verhuizen... ben je er gelijk van af.
Ben ik even blij; dacht voor de outages hier ook nog enkele servers te gaan plaatsen (wel voor dingen zoals NS3/4 en mail fallback)
Spijtig genoeg staan hier enkele klanten van me.
Providers zoals easyhost, extremeservices, ... zullen het niet makkelijk hebben om dit aan hun klanten uit te leggen.
(update 19:45) Scarlet zal nu de stroom afleggen, de maximale downtime wordt geschat op 2 uur. Meer informatie volgt nog.
Onze firewalls zijn nochtans nog steeds online tot op dit moment...
Zojuist zijn onze monitoring dozen terug offline gegaan.
Succes voor de mensen die daar zitten!
Dit is echt niet meer om te lachen,moet alles nu echt weeral offline gaan,hebben ze bij scarlet dan echt geen andere oplossing voor het oplossen van hun problemen.
Ik volg nog steeds niet dat ze daar maar stroom issues blijven hebben... Dan moet er toch iets serieus mis zijn met hun bedrading of toevoer? En hun generatoren?
eXtreme Service
05/05/09, 21:21
Eerst was het de omschakeling tussen net en noodstroom. Nu moeten ze een by-pass leggen over de hoofdschakelaar?
(update 20:05) Twintig minuten na de melding van Scarlet kunnen wij bevestigen dat onze co-locatie ruimte nog steeds stroom heeft. Wij verwachten echter dat dit elk moment kan worden uitgeschakeld. Uit interne informatie bij Scarlet hebben we vernomen dat het probleem zich situeert bij de hoofdschakelaar en dat een by-pass wordt voorbereid.
(update 20:15) Het volledige datacenter is nu opnieuw zonder stroom, geschatte downtime zal maximaal 2 uur zijn.
En nu maar hopen dat het niet te lang duurt...
Ik gok dat ze ergens een component hebben die niet voorzien is op het huidige stroomverbruik.
Klinkt allemaal niet goed, zoveel in zo'n korte tijd.
Vrees dat het gaat van mis management maar onkunde of know-how.
+++1
Absoluut gelijk heb je !
Aan die onkunde op alle vlakken is scarlet destijds failliet gegaan! Belgacom had beter iedereen buitengegooid en alles herzien.
Een stroompanne in een DC kan ik begrijpen maar niet aan deze frequentie. Bovendien stinkt de boel naar onkunde en incompetentie.
Ik vind het trouwens verre van normaal dat ze de stroom zomaar opnieuw afsluiten.
Terwijl iedereen die daar rond loopt weet dat dit grote hardware en economische schade tot gevolg kan hebben.
En dan wordt het plots voer voor advocaten. Bewust de stroom uitschakelen met alle bijkomende schade tot gevolg. Dan nog maar te zwijgen over alle vorige pannes die waarschijnlijk voortvloeien uit het wanbeheer van scarlet
I.p.v. eerst een omweg te zoeken... een andere en wss (duurdere) oplossing.
Werkelijk schandalig!
Hadden we bij Capelle vorig jaar ook een paar keer achter elkaar. Toen lag het volgens mij aan de airco als ik het me nog goed kan herinneren.
Ik ga toch eens een mail sturen naar Scarlet als Scarlet-klant. Doordat ik weet dat het niet aan mijn host ligt maar bij Scarlet zelf besef ik maar al te goed dat ze er zelf niets aan kunnen doen en dat dit volledig buiten hun wil is.
Ik kan alleen maar hopen dat het in de toekomst beter zal gaan.
vincentvdk
05/05/09, 22:41
Volgens mij is hetgeen ze nu aan het doen zijn zelfs geen definitieve oplossing. Ik hoop dat ze een deftige communicatie doen deze keer.
De maximale downtijd van 2 uur is nu al voorbij en nog steeds is alles down...
Dit is onverantwoord,wat zijn ze toch aan het doen bij scarlet...
Ik hoop het ook want zoals co0lman al aanhaalde, zijn het de kleinere hostingbedrijven die afnemen bij bv. EasyHost, die uiteindelijk wel de klanten gaan verliezen door de blunders van Scarlet.
Wijzelf proberen ons rack zo redundant mogelijk op te bouwen, en doen hier dus de nodige investeringen voor, maar daar heb je weinig aan als een beheerder als Scarlet plots even de stekker gaat uittrekken...
Dat communicatie bij Scarlet niet hun sterkste kant is kwam trouwens ook duidelijk naar boven in het artikel dat recent op DataNews stond, waarin ze stelden dat ze na de eerste stroompanne hun "grote klanten" hun excuses hadden aangeboden. Blijkbaar zijn de kleinere klanten niet belangrijk genoeg om ook excuses van Scarlet te ontvangen, ondanks dat voor deze de percentuele schade soms het grootst is gezien deze minder klanten hebben en minder omzet/winst draaien. Behoorlijk foute woordkeuze dus...
1) Waarom heeft scarlet nergens een backupservertje staan voor hun eigen website?
2) Why the .... zitten we de statuspagina van easyhost te volgen (@easyhost, dank daarvoor overigens)? Lijkt me echt niet overbodig dat ze er zelf een zouden hebben.
Helemaal gelijk,wij zelf hebben een online winkel en als onze site offline is zijn er ook geen inkomsten,we verliezen hiet ook vele klanten mee.
1) Waarom heeft scarlet nergens een backupservertje staan voor hun eigen website?
2) Why the .... zitten we de statuspagina van easyhost te volgen (@easyhost, dank daarvoor overigens)? Lijkt me echt niet overbodig dat ze er zelf een zouden hebben.
Die hebben ze hoor. Alleen is die een beetje down voor het moment. Al staat de klok er een uurtje voor. was iets na 18u en er stond al mooi dat het iets na 19u was. Waren wel paar rode bollen te zien voorzien van de nodige uitleg. Maar eigenlijk zouden ze best een backup mogen voorzien. Al was het maar met wat beperkte informatie.
(update 20:15) Het volledige datacenter is nu opnieuw zonder stroom, geschatte downtime zal maximaal 2 uur zijn.
[En: The datacenter is now again without power, the emergency maintenance is estimated to maximum 2 hours]Nu: 22:29
Als ik goed kan tellen zitten ze er al een klein kwartiertje over. Leuke maximums hebben ze daar.
Kan begrijpen dat zoiets wat langer duurt, maar geef dan geen "valse" beloftes vooraf?
Inderdaad, de tijd van 2u is reeds voorbij... tis echt erg, krijg hier al de hele avond de ene telefoon achter de andere van klanten...
Dit kan echt niet meer verder zo...
Tim.Bracquez
05/05/09, 23:32
Dit kan echt niet meer verder zo...
Kan je uiteraard ook zelf iets aan doen, niet dat ik het goedkeur / normaal vindt wat er gebeurd ginds.
Hangt allemaal af wat voor dingen je aanbiedt etc, sommigen rekenen niet op 1 DC, anderen wel.
(binnenkort loopt het DC van scarlet leeg en komt er terug plaats voor nieuwe 'budget' diensten)
Verder uit interesse, waarom heeft een DC een hoofdschakelaar die voor zoveel problemen kan zorgen?
Dat je iets achter de inkomende stroom en stroom van de UPS/generatoren wil hebben, kan ik inkomen voor noodgevallen/onderhoud, maar ik denk niet dat er iemand gek genoeg is zo'n brug te verbreken (geen idee hoeveel A-tjes we hier dan spreken, maar waarschijnlijk meer dan de 250 die ik al met vonken heb laten schakelen), al dan niet met relais'.
eXtreme Service
05/05/09, 23:36
(update 22:25) Scarlet tracht alle schakelaars te bypassen. Meer informatie hebben we op dit moment niet. Er is geen zicht op wanneer de stroom terug beschikbaar zal zijn.
(update 22:32) Scarlet zal nu een poging doen om de stroom terug te activeren. Wij verwachten dat we elk moment onze eigen racks terug van stroom kunnen voorzien.
Wij wachten af...
Tim.Bracquez
05/05/09, 23:38
Verder uit interesse, waarom heeft een DC een hoofdschakelaar die voor zoveel problemen kan zorgen?
Meer bepaald één hoofd schakelaar...
@ Exteme services: Krijg jij informatie van scarlet doorgespeeld of informeren ze de klanten niet?
Wij wachten af...
Schakelaars bypassen, kan ik daaruit afleiden dat er nog niets opgelost is?
Ben blij dat ik wekelijks een backup laat maken en die op een ander server laat plaatsen. Als er iets mis zou lopen ben ik niet zo heel veel aan gegevens kwijt. En dat voor minder dan 3 euro per maand. Alleen zie ik deze dienst niet meer staan op de website van diegene waar ik dit afneem.
Weet iemand hoeveel sites er ongeveer gehost worden via het datecenter te vilvoorde?
Het zullen der wel veel zijn...
Weet iemand hoeveel sites er ongeveer gehost worden via het datecenter te vilvoorde?
Het zullen der wel veel zijn...Een count van hoeveel websites zegt niet gek veel..
Hoeveel racks staan er in scarlet V eigelijk?
(update 22:41) Momenteel wordt de frequentie van de netstroom en de backup stroom gesynchroniseerd.
Tim.Bracquez
05/05/09, 23:44
(update 22:41) Momenteel wordt de frequentie van de netstroom en de backup stroom gesynchroniseerd.
Hopelijk zegt het niet weer 'plof', zou maar enkele minuten toch in beslag mogen nemen?
(update 22:41) Momenteel wordt de frequentie van de netstroom en de backup stroom gesynchroniseerd.Iemand die me dàt wil uitleggen?
Weet iemand hoeveel sites er ongeveer gehost worden via het datecenter te vilvoorde?
Het zullen der wel veel zijn...
De .be registrars die in scarlet zitten en nu volledig offline zitten beheren een 25K .be (Scarlet zelf en de subfilialen van Combell, Xhost en Easyhost) domeinen, al zullen ze ook andere extensies hosten en worden die namen wellicht niet allen gehost op servers in scarlet. Ook zijn er vele kleinere partijen die elders namen inkopen die nu offline zijn en zijn er bedrijven die slechts gedeeltelijk in Scarlet zitten (vb Nucleus).
Maar zo'n cijfer zegt niks natuurlijk.
eXtreme Service
05/05/09, 23:46
Overzicht van belangrijke partijen in het Scarlet Datacenter:
Zdnet.be
Tv-vlaanderen.be (al hun klanten?)
Base.be (inmiddels verplaatst)
Vitaya.be
...
Bedankt voor de info,dat zijn er echt wel veel.
Dat zoiets kan gebeuren en dit 3X in 10 dagen is echt ongelooflijk
Avenger 2.0
05/05/09, 23:51
Overzicht van belangrijke partijen in het Scarlet Datacenter:
Zdnet.be
Tv-vlaanderen.be (al hun klanten?)
Base.be (inmiddels verplaatst)
Vitaya.be
...
TV kijkende klanten van TV vlaanderen en volledige EDGE datanetwerk van Base liggen inderdaad uit.
GlobalServe
05/05/09, 23:51
Iemand die me dàt wil uitleggen?
Stoom in belgie is op 50 Hertz, wanneer een generator draait, kan dit verschillen.
Daarmee moet de generator een bepaald aantal toeren per minuut draaien om 50 fluktuaties per seconde te hebben 50 x +240 V en 50 x -240 V.
Dit vooral op het vast stroomnet en backup stroomnet samen wanneer er overgenomen word alle 2 tegelijk +240V of -240V afgeleverd word.
Dit moet perfect zijn anders gaat er vanalles mis gaan :)
* (update 22:48) De stroom in onze room is terug beschikbaar. Onze engineers on site zullen nu onze racks terug van stroom voorzien., rack per rack.
Stoom in belgie is op 50 Hertz, wanneer een generator draait, kan dit verschillen.
Daarmee moet de generator een bepaald aantal toeren per minuut draaien om 50 fluktuaties per seconde te hebben 50 x +240 V en 50 x -240 V per seconde.
Dit moet perfect zijn anders gaat er vanalles mis gaan :)Zo ver ben ik al wel bekend met het generator/motor princiepe, interesseert mij meer hoe (en waarom) je de airco's opstart voor dat dat gebeurt is.
tja dan maar weer rustig afwachten.
Net eerste mails via Scarlet op mijn Scarlet-adres zien binnenkomen. Maar verwacht er nog meer.
Hier zijn we ook terug online ... voorlopig ...
Bij ons is alles inmiddels terug online. Hopelijk is het nu voor langer dan een paar dagen...
Ben alvast benieuwd wat er uit de bus gaat komen op de crisisvergadering tussen Easyhost en Scarlet die gepland is voor deze week nog.
en terug dicht... (hopelijk voor lang :))