Bekijk Volledige Versie : Grote storing EvoSwitch!!!
Bakker ICT
31/01/08, 18:38
Kreeg net melding van Leaseweb,
Location: EvoSwitch
Reason: Under investigation *******************************
Dear Customer,
At the moment we experience some troubles in (part of) our network.
We are doing our utmost to solve this issue a.s.a.p.
As soon as we have more information available, we will publish it here.
Please be patient while we are working on this problem.
Regards,
LeaseWeb BV
Servers allemaal gereboot, zelffs van hyves .... :\ Iemand al weet wat er daar gaande is ? Schandalig dit
remoteoffice
31/01/08, 18:39
stroom dipje door het weer ? :)
Hallo Bakker,
Hier ook direct in actie gekomen. Ze zijn ermee bezig, ben benieuwd! Al onze racks zijn momenteel offline.
Ik dank mijn wantrouwen en de aanschaf van een eigen UPS in het rack. :D
De stroom is trouwens 27 seconden offline geweest.
"State of the art" was het toch? Volgens mij heeft EvoSwitch in een jaar tijd al meer storingen gehad dan heel Redbus in 10 jaar tijd.
Succes met de storing!
Ik dank mijn wantrouwen en de aanschaf van een eigen UPS in het rack. :D
De stroom is trouwens 27 seconden offline geweest.
Dus was héél kortstondig?
Yup, 'k mag hopen dat dit niet komt omdat de generatoren dan bezig zijn met starten want dan heb je daar vrij weinig aan natuurlijk.
Hopelijk komen ze met een goede uitleg...
Bakker ICT
31/01/08, 18:51
stroom dipje door het weer ? :)
Plaatselijk hevige tornado gok ik :X
Ik dank mijn wantrouwen en de aanschaf van een eigen UPS in het rack. :D
De stroom is trouwens 27 seconden offline geweest.
Ik baal er goed van! Ik hoop dat dit zo snel mogelijk opgelost is.
Bakker ICT
31/01/08, 18:53
Hopelijk komen ze met een goede uitleg...
Ik denk dat ze dat wel verplicht zijn, ziet er naar uit dat gewoon een hele hal down is gegaan.
Yup, 'k mag hopen dat dit niet komt omdat de generatoren dan bezig zijn met starten want dan heb je daar vrij weinig aan natuurlijk.
Nee.
Een goed systeem werkt zo, dat je UPS als eerste de klap opvangt, zodat alles blijft draaien, dit UPS systeem gunt je generatoren de kans om op te starten.
Alles komt terug online hier.
rensariens
31/01/08, 19:06
Alle services vanuit evo zijn hier weer up and running, ben benieuwd wat de oorzaak was. Hopen dat het UP blijft ieder geval.
full-Patrick
31/01/08, 19:09
Hier is nog niets up... Maargoed, we wachten af :)
Hier nergens last van gehad in data2...
[root@node02-evo-hrlm ~]# uptime
18:12:16 up 76 days, 23:59, 1 user, load average: 1.45, 1.69, 2.09
ah, inmiddels een update:
[17:50h]
We received an update from EvoSwitch:
"...during maintenance on one of the UPS systems a unexpected very short powerdip (max. 30seconds) was experienced. This resulted in loss of power to cabinets that were not redundantly connected. Allthough the maintenance is not yet completed, we do not expect any more powerdips..."
Customers still experiencing issues with services may contact support@leaseweb.com for free support.
We are sorry for the inconvenience this might have caused.
Bij ons zijn alle servers (behalve 2) weer up. Volgen een update op noc.leaseweb was er onderhoud aan de ups aan de gang, waar blijkbaar iets mis is gegaan.
full-Patrick
31/01/08, 19:20
Alles is bij mij weer up
EDIT: Nvm, alles ook alweer down -_-
doet het ook nog niet.
Het is wel jammer dat dit ook gebeurt, ik hoop dat dit nu het laatste is wat er gebeurt.
Statistisch gezien moeten we nu wel alles hebben gehad.
Ik ben benieuwd of iemand hier een SLA op deze zaken heeft, want volgens mij geeft LW deze niet. Enkel EVO zelf.
rensariens
31/01/08, 19:41
Hier slechts 1 maal down. uptime nu 1 uur 17 min
Ik denk dat ze dat wel verplicht zijn, ziet er naar uit dat gewoon een hele hal down is gegaan.Enkel hal 1 of hal 2?
Mijn server is niet bereikbaar, weet alleen (nog) niet of het komt omdat ik een uur ervoor aan het klooien was met Xen, of omdat de server nog niet opgestart is na de powerdip.
swedendedicated
31/01/08, 19:54
"State of the art" was het toch? Volgens mij heeft EvoSwitch in een jaar tijd al meer storingen gehad dan heel Redbus in 10 jaar tijd.
Succes met de storing!
lol @ robert, haha kan wel wat grappigs uitkomen :)
Hyves is nog steeds plat, redundancy van hyves is dus ook niets.
lol @ robert, haha kan wel wat grappigs uitkomen :)
Hyves is nog steeds plat, redundancy van hyves is dus ook niets.
Hyves heeft geen redundancy, dat beweren ze ook niet :)
AlfaHosting
31/01/08, 20:10
Wie haalt het dan ook in zijn hoofd om rond 17.00 uur een onderhoud te gaan doen ?
Wie haalt het dan ook in zijn hoofd om rond 17.00 uur een onderhoud te gaan doen ?
idd een beetje stom... doe dit soort zaken snachts...
lol @ robert, haha kan wel wat grappigs uitkomen :)
Het is niet bepaald grappig bedoeld..... ik doel hier op het feit dat Evoswitch het heel datacenter verkoopt als "State of the art" ook de prijzen voor stroom slaan daarom ook nergens op. Als een nieuw datacenter al zo veel problemen heeft dan denk ik dat ze iets goed fout doen, want ze beloven dingen die ze dus blijkbaar niet waar kunnen maken.
Bakker ICT
31/01/08, 20:25
Het is niet bepaald grappig bedoeld..... ik doel hier op het feit dat Evoswitch het heel datacenter verkoopt als "State of the art" ook de prijzen voor stroom slaan daarom ook nergens op. Als een nieuw datacenter al zo veel problemen heeft dan denk ik dat ze iets goed fout doen, want ze beloven dingen die ze dus blijkbaar niet waar kunnen maken.
Laten we het hopen dat het "kinderziektes" zijn, en niet vaker gaat voorkomen..
Je heb best kans dat het gewoon een extern bedrijf bezig was met het onderhoud en EvoSwitch hier zelf ook niets aan doen. Weet niet precies hoe dat gaat? Of ze daar zelf technische voor in dienst hebben? Lijkt me gewoon externe partijen right?
Het had al 'leuk' geweest als ze dit soort onderhouden aangekondigd zouden hebben en/of dit binnen een normaal maintenance window hadden uitgevoerd.
Ook de melding op noc was laat met vermelden van de 'storing'. Het mailen van dit soort zaken heeft niet veel zin als iedereen zijn systeem aan het booten is.
Heeft EVO ook een eigen mailinglist/noc pagina?
williamvdh
31/01/08, 20:27
Hyves.nl source:
<html>
<!-- This is intentionally empty -->
</html>
Alle subdomeinen werken hier niet
Evoswitch heeft volgens mij geen NOC pagina, maar Evoswitch werkt praktish volledig op het LSW systeem.
Ik herhaal wat ik eerder al zei, het ziet er een prima DC uit, wat aan de warme kant in de warme gangen, maar verder top. :)
hyves is nog queries en db aant het rebuilden gok ik
Het schiet nog niet echt op... mijn servers zijn helaas nog steeds niet te bereiken. Iemand anders al meer succes?
Het schiet nog niet echt op... mijn servers zijn helaas nog steeds niet te bereiken. Iemand anders al meer succes?De storing is inmiddels al voorbij hoor, ik raad je aan LSW eens op te bellen.
Hmmm ik heb ze een uurtje geleden nog aan de telefoon gehad, tot nog toe geen reactie. Ik ga idd ze nog maar een keer bellen.
Alsof de duivel ermee speelt :D ik zat al in de telefonische keuze menu's en opeens krijg kan ik weer pingen. Laten we hopen dat ze komende tijd online blijven.
hyves is nog queries en db aant het rebuilden gok ik
Dat gaat nog wel even duren ;):D
Nou jongens alles werkt hier inmiddels alweer geruime tijd naar behoren! Laten we zeggen een les voor de volgende keer.
idd een beetje stom... doe dit soort zaken snachts...
Onderhoud aan een nobreak power voorziening zou nooit en te nimmer een onderbreking op moeten leveren. In feite maakt het dus niet uit wanneer je het doet, want er zou geen enkel probleem bij moeten ontstaan.
Het is net zoiets als geen configuratiewijzigingen maken in je routers, als ze overdag druk zijn. Van sommige dingen mag je verwachten dat ze gewoon horen te gebeuren zonder enige onderbreking.
MediaServe
31/01/08, 23:39
Zitten er eigenlijk nog meer colocatie providers in Evoswitch behalve Leaseweb?
Zitten er eigenlijk nog meer colocatie providers in Evoswitch behalve Leaseweb?
Niet op grote schaal vermoed ik..
Zitten er eigenlijk nog meer colocatie providers in Evoswitch behalve Leaseweb?
Wij zelf bieden colocatie aan binnen EvoSwitch. Maar (nog) niet op grote schaal. Verder ken ik er maar weinig binnen EvoSwitch momenteel.
Ik kan jullie vertellen dat het LeaseWeb personeel met man en macht werkt om alle servers (SLA/non-SLA) terug te krijgen die hangen tijdens het booten of met andere problemen kampen.
Zo de hyves database heeft het niet lekker doorstaan :)
*Statistieken zijn tijdelijk uitgeschakeld tot zaterdagavond.*
Vanwege een stroomstoring zijn we in het begin donderdagavond uit de lucht geweest. Berichten, krabbels plaatsen, chat en statistieken zijn nog even niet beschikbaar, sorry hiervoor! Dit zal uiterlijk 11 uur weer verholpen zijn.
We zijn de Goldmember statistieken aan het omzetten naar een nieuw systeem, om 9 uur werkt het weer!
Van fouten moet je leren :D
hoop voor andere dat het geen data verlies of iets dergelijks heeft gekost.
Niet om een schop na te geven, maar waarom wordt men toch altijd boos wanneer 1 powerfeed uitvalt?
In elk DC heb je een A en B feed beschikbaar, maar toch blijft men weigeren er gebruik van te maken.
Een STS heb je voor 500 euro en de servers met redundant power uitrusten kost ook niet al te veel.
Ik geef toe, bij ons zit ook nog niet alles op redundant power, maar daar wordt wel heel hard naar toe gewerkt.
Gaat er bij niemand dan een lampje branden dat een STS hier je had kunnen redden? In het nieuwsbericht staat duidelijk dat 1 feed het begaf, niet beide.
Ik heb nog nooit gezien dat beide feeds in een DC plat gingen.
Je krijgt volgens mij nergens garantie op stroom zolang je maar 1 feed gebruikt.
Niet om een schop na te geven, maar waarom wordt men toch altijd boos wanneer 1 powerfeed uitvalt?
In elk DC heb je een A en B feed beschikbaar, maar toch blijft men weigeren er gebruik van te maken.
Een STS heb je voor 500 euro en de servers met redundant power uitrusten kost ook niet al te veel.
Ik geef toe, bij ons zit ook nog niet alles op redundant power, maar daar wordt wel heel hard naar toe gewerkt.
Gaat er bij niemand dan een lampje branden dat een STS hier je had kunnen redden? In het nieuwsbericht staat duidelijk dat 1 feed het begaf, niet beide.
Ik heb nog nooit gezien dat beide feeds in een DC plat gingen.
Je krijgt volgens mij nergens garantie op stroom zolang je maar 1 feed gebruikt.
Volgens mij zijn er het afgelopen jaar hele suites plat gegaan ;)
Volgens mij zijn er het afgelopen jaar hele suites plat gegaan ;)Dan ook echt de A en de B feed tegelijk?
Niet om een schop na te geven, maar waarom wordt men toch altijd boos wanneer 1 powerfeed uitvalt?
In elk DC heb je een A en B feed beschikbaar, maar toch blijft men weigeren er gebruik van te maken.
Een STS heb je voor 500 euro en de servers met redundant power uitrusten kost ook niet al te veel.
Ik geef toe, bij ons zit ook nog niet alles op redundant power, maar daar wordt wel heel hard naar toe gewerkt.
Gaat er bij niemand dan een lampje branden dat een STS hier je had kunnen redden? In het nieuwsbericht staat duidelijk dat 1 feed het begaf, niet beide.
Ik heb nog nooit gezien dat beide feeds in een DC plat gingen.
Je krijgt volgens mij nergens garantie op stroom zolang je maar 1 feed gebruikt.
Bij Evoswitch is ook maar 1 powerfeed mogelijk.
Bij Evoswitch is ook maar 1 powerfeed mogelijk.Het nieuwsbericht zei:
This resulted in loss of power to cabinets that were not redundantly connected.
Ik ging er dus wel vanuit dat je een A en B-feed kan krijgen.
Op de site staat het ook: http://www.evoswitch.com/en/infrastructure
230V AC, distributed via dual independent (2N) circuits to rack level. 380V AC and 48V DC available on request.
Evoswitch heeft volgens mij geen NOC pagina, maar Evoswitch werkt praktish volledig op het LSW systeem.
EvoSwitch heeft een eigen NOC pagina voor klanten.
Bij Evoswitch is ook maar 1 powerfeed mogelijk.
Je kunt in EvoSwitch wel degelijk twee powerfeeds krijgen.
Het nieuwsbericht zei:
Ik ging er dus wel vanuit dat je een A en B-feed kan krijgen.
Op de site staat het ook: http://www.evoswitch.com/en/infrastructure
Volgens mij is dit twee jaar geleden in Redbus gebeurd. Zowel A als B eruit. Maar als je voor redundant wilt gaan, dan moet je gewoon een STS plaatsen. Een zekering klapt er ook wel eens uit door ouderdom of een andere reden.
Vervelend iig voor iedereen, hoop dat alles weer werkt bij jullie.
Volgens mij is dit twee jaar geleden in Redbus gebeurd. Zowel A als B eruit. Maar als je voor redundant wilt gaan, dan moet je gewoon een STS plaatsen. Een zekering klapt er ook wel eens uit door ouderdom of een andere reden.
Vervelend iig voor iedereen, hoop dat alles weer werkt bij jullie.Klopt, waren wij toen niet echt blij mee.
Dat heeft ons toen wakker geschud om alles redundant te gaan uitvoeren op stroom niveau en niet alleen op server niveau.
Klopt, waren wij toen niet echt blij mee.
Ja, nou wij ook niet :D Maar je hebt gelijk, onze racks hebben nu ook A + B + STS. Gelukkig knallen de nieuwe APC's er ook niet zo vaak meer uit. Maar vrijwel alle machines hebben bij ons twee of drie voedingsblokken, dat scheelt ook een hoop.
Klopt, waren wij toen niet echt blij mee.
Dat heeft ons toen wakker geschud om alles redundant te gaan uitvoeren op stroom niveau en niet alleen op server niveau.
Maar dan heb je dus ook ups in de kasten? Want een sts helpt natuurlijk niet als beide feeds eruit liggen. Of hoe hebben jullie het dan?
Een zware domper voor hyves zeg!
hun database farms van 300-350 servers even de lucht weer in helpen (en dan ook nog op de goede manier).. niet echt fijn om te doen lijkt mij :p
Hoop voor ze dat ze geen backup moeten terug zetten, want dan zijn ze nog verder van huis..
technologie.hyves.nl/forum/1338816/1-KV/Een_paar_kleine_Hyves_database_statistieken/
DennisWijnberg
01/02/08, 11:43
Lang leve Virtu! Gelukkig snappen zij WEL hoe het moet!
Maar dan heb je dus ook ups in de kasten? Want een sts helpt natuurlijk niet als beide feeds eruit liggen. Of hoe hebben jullie het dan?Op beide feeds krijg je een garantie, maar die krijg je pas als je je apparatuur redundant uitvoert.
Daarom alleen een STS. De tweede feeds lopen over gescheiden systemen, dus dan moeten beide UPS systemen/circuits het begeven wil de stroom uitvallen in een cabinet.
Daarom geen UPS, alleen STS of redundant power supply's in de machine's.
Lang leve Virtu! Gelukkig snappen zij WEL hoe het moet!
En EuNetworks. Daar heb ik meerdere rondleidingen gehad die me duidelijk hebben gemaakt dat 't allemaal tot in de puntjes is geregeld en anders is dan elders.
Overigens betreft die STS switches; die kunnen toch ook stuk?
Gelukkig doen wij tegenwoordig ook alles op redundant feeds tot aan de servers.
Onze laatste server deed het om 21:30 uur weer, de meeste waren zo weer up, een enkeling bleek iets langer down. Ik vind dat het allemaal netjes opgepakt is in EVO en alles is keurig afgewerkt door de engineers die daar lopen.
Tis een beetje naatje dat zoiets gebeurd maar ik heb begrepen dat er plechtig was beloofd door de installateur van de UPS dat dit dus niet zou gebeuren, maarja ik denk dat EVO nog wel een hartig woordje te spreken heeft met meneer de leverancier ;-)
Lang leve Virtu! Gelukkig snappen zij WEL hoe het moet!
Opzich is dit best wel een non opmerking he, aangezien Evo het dus wel op orde had, maar gewoon 9 op de 10 klanten geen A+B feed + STS had.
En daar kan het natuurlijk ook mis gaan.
leagzhosting
01/02/08, 12:14
shit happens helaas
leaseweb/evoswitch had gisteren wel "engineers" die konden helpen bij problemen
dat scheelt weer extra kosten voor extern personeel als je bijvoorbeeld even niet in de buurt bent
rensariens
01/02/08, 12:20
Opzich is dit best wel een non opmerking he, aangezien Evo het dus wel op orde had, maar gewoon 9 op de 10 klanten geen A+B feed + STS had.
En daar kan het natuurlijk ook mis gaan.
Gezien ze die niet standaard leveren is dat ook niet een geheel "eerlijke" opmerking ;)
leagzhosting
01/02/08, 12:25
Gezien ze die niet standaard leveren is dat ook niet een geheel "eerlijke" opmerking ;)
wees eerlijk zoveel kost dat toch niet :)
stel het kost 500 euro eenmalig kost dat omgerekent 40 euro per maand extra
wil je hoge uptime dan betaal je er uiteraard gewoon voor
Hyves zal er binnenkort ook wel genoeg van hebben, ze zijn binnen een jaar wel erg vaak down geweest door datacenter problemen in Easynet en Evoswitch.
Gezien ze die niet standaard leveren is dat ook niet een geheel "eerlijke" opmerking ;)
Tuurlijk wel, het is de basisschool niet, lijkt me dat je daar zelf wel of niet voor kiest bij oplevering van een rack.
AlfaHosting
01/02/08, 12:48
En blijft de vraag .. een onderhoud om 17.00 uur ?
DennisWijnberg
01/02/08, 13:09
Opzich is dit best wel een non opmerking he, aangezien Evo het dus wel op orde had, maar gewoon 9 op de 10 klanten geen A+B feed + STS had.
En daar kan het natuurlijk ook mis gaan.
Opzich ben ik het met je eens hoor. Alleen dan ligt de fout dus bij de provider, omdat zij geen dubbele feed hebben...
Als jezelf een dusdanig grote UPS installatie hebt staan dan zal je snappen waarom dat niet s'nachts gebeurd...
Als het goed is wordt de UPS (live!) elke woensdag om 9.00 uur 's ochtends getest. Als die test goed is verlopen, blijft het vreemd dat een dag later de UPS problemen heeft. De gevolgen bij ons waren in ieder geval onacceptabel. Van gecrashte raid arrays tot een defecte switch.
Hopelijk komt Evoswitch dit keer met verklaring!
Opzich ben ik het met je eens hoor. Alleen dan ligt de fout dus bij de provider, omdat zij geen dubbele feed hebben...
LeaseWeb levert standaard maar een feed. Volgens hun is een feed ook voldoende, vanwege hun aanpak mbt UPS/redundantie.
MediaServe
01/02/08, 14:08
Daarom alleen een STS. De tweede feeds lopen over gescheiden systemen, dus dan moeten beide UPS systemen/circuits het begeven wil de stroom uitvallen in een cabinet.
Ik ben benieuwd wat er gebeurt als iedereen een STS switch gebruikt. Een grote stroompiek zorgt voor een relatief te kleine weerstand op de apparatuur ten opzichte van de bekabeling. Oftewel, door de stroompiek krijg je een spanningsdip wat zorgt voor een nog grotere stroom waardoor de B-feed ook zal uitvallen. Of in het ergste geval kun je een te lange brown-out krijgen waarbij flink wat apparatuur kapot zal gaan.
En nee, daar is helaas niet echt iets aan te doen behalve enorm veel overcapaciteit leveren. Met 100 racks is het niet gek om een piek te krijgen van meer dan 2500 Ampère. En dit effect zal al heel snel optreden als je 14 Ampère gaat aanbieden op een 16 Ampère circuit. Je moet zeker 100% overcapaciteit hebben op het gehele circuit, van de generator tot aan de server. Dit heeft geen enkel datacentrum.
(wij hebben zelf overigens ook alle racks met STS switches uitgerust)
En EuNetworks. Daar heb ik meerdere rondleidingen gehad die me duidelijk hebben gemaakt dat 't allemaal tot in de puntjes is geregeld en anders is dan elders.
Dat zegt ieder datacentrum, ook diegene waar wel storingen zijn geweest. Storingen zijn gewoon niet gegarandeerd uit te sluiten. Een gegarandeerde uptime van 100% voor een oneindige periode is onmogelijk, denk aan kortsluiting en verrotte zekeringen. Je zult altijd een moment krijgen dat de stroom eraf moet of (zoals in dit geval) er gewoon vanzelf af gaat ;)
Liever trouwens om 17.00 uur 's middags dan op zaterdagavond als iedereen zat in de kroeg zit :D
:lovewht:
Niet om een schop na te geven, maar waarom wordt men toch altijd boos wanneer 1 powerfeed uitvalt?
In elk DC heb je een A en B feed beschikbaar, maar toch blijft men weigeren er gebruik van te maken.
Een STS heb je voor 500 euro en de servers met redundant power uitrusten kost ook niet al te veel.
Ik geef toe, bij ons zit ook nog niet alles op redundant power, maar daar wordt wel heel hard naar toe gewerkt.
Gaat er bij niemand dan een lampje branden dat een STS hier je had kunnen redden? In het nieuwsbericht staat duidelijk dat 1 feed het begaf, niet beide.
Ik heb nog nooit gezien dat beide feeds in een DC plat gingen.
Je krijgt volgens mij nergens garantie op stroom zolang je maar 1 feed gebruikt.
Die redundante voeding hoeft niet eens, met een STS kom je al een heel eind.
Ben benieuwd wat hyves gaat doen..
Alles kan stuk, dubbele voedingen kunnen ook allebei uitvallen en helaas zijn dubbele voedingen zelfs bij de grotere merken alleen bij de duurdere spullen te krijgen.
Zelf vind ik een UPS in het rack nog een van de betere oplossingen voor de stroomvoorziening tot aan de server. Wel kostbaar, kan je ook natuurlijk nog combineren met een STS. Ook die kan stuk maar dan blijft de storing in ieder geval beperkt tot één rack.
De prijs van een 2e feed in EVO is totaal niet concurrerend t.o.v. de markt.
Swiftway-UK
01/02/08, 14:39
De prijs van een 2e feed in EVO is totaal niet concurrerend t.o.v. de markt.
Waar is het goedkoper dan? het totaal plaatje (rack, power, feeds) ? zeker niet bij InterXion, GlobalSwitch, EUnetworks, Easynet, SBP en TelecityRedbus. Zelfs niet op grotere commitments (75 racks+) waar prijzen redelijk onderhandelbaar zijn.
Alles kan stuk, dubbele voedingen kunnen ook allebei uitvallen en helaas zijn dubbele voedingen zelfs bij de grotere merken alleen bij de duurdere spullen te krijgen.
Zelf vind ik een UPS in het rack nog een van de betere oplossingen voor de stroomvoorziening tot aan de server. Wel kostbaar, kan je ook natuurlijk nog combineren met een STS. Ook die kan stuk maar dan blijft de storing in ieder geval beperkt tot één rack.
De prijs van een 2e feed in EVO is totaal niet concurrerend t.o.v. de markt.De history heeft ondertussen al wel uitgewezen dat er vaker een power-feed uitvalt dan een STS of twee voedingen.
En als je STS het begeeft gaan wat, 10 servers offline? 20? Bij twee voedingen die kapot gaan, gaat 1 server plat.
Begeeft 1 feed het en heb je alles niet redundant, dan vallen pak-m-beet 5 cabinets helemaal donker, dat is toch snel 50 tot 100 servers.
Dan heb ik liever die ene STS die het begeeft en de uitval van een powersurge overleven.
Dat zegt ieder datacentrum, ook diegene waar wel storingen zijn geweest. Storingen zijn gewoon niet gegarandeerd uit te sluiten. Een gegarandeerde uptime van 100% voor een oneindige periode is onmogelijk, denk aan kortsluiting en verrotte zekeringen. Je zult altijd een moment krijgen dat de stroom eraf moet of (zoals in dit geval) er gewoon vanzelf af gaat ;)
Dat veel partijen het roepen; dat klopt.
Om te beginnen hebben ze op EuNetworks geen UPS's maar vliegwielen. Ik heb me daar in verdiept en ik ben tot de conclusie gekomen dat dit een vrij superieure manier van klappen opvangen is t.o.v. batterijen (die bovendien kostbaar zijn en vervangen moeten worden).
Dat 100% uptime voor onbepaalde tijd niet bestaat, ben ik met je eens.
Om te beginnen hebben ze op EuNetworks geen UPS's maar vliegwielen. Ik heb me daar in verdiept en ik ben tot de conclusie gekomen dat dit een vrij superieure manier van klappen opvangen is t.o.v. batterijen (die bovendien kostbaar zijn en vervangen moeten worden).
Het systeem wat bij EU staat is vrijwel gelijk aan wat 365 Main heeft staan, wij kijken ook naar een dergelijk systeem voor een nieuw project.
Het grote probleem met dit systeem is dat je maar ongeveer 30 seconden hebt om actie te ondernemen als je generator niet automatisch start.
Als het werkt is het systeem inderdaad beter dan een standaard genset + ups oplossing.
Maar het kan dus ook fout gaan zoals bij 365 Main.
Met andere woorden, alles kan kapot :).
Persbericht naar aanleiding van de power surge bij 365 Main: http://www.365main.com/press_releases/pr_8_1_07_365_main_report.html
Dat veel partijen het roepen; dat klopt.
Om te beginnen hebben ze op EuNetworks geen UPS's maar vliegwielen. Ik heb me daar in verdiept en ik ben tot de conclusie gekomen dat dit een vrij superieure manier van klappen opvangen is t.o.v. batterijen (die bovendien kostbaar zijn en vervangen moeten worden).
Dat 100% uptime voor onbepaalde tijd niet bestaat, ben ik met je eens.
Grappig,
Ik heb hier momenteel een UPS monteur in ons DC lopen voor een checkup, en heb çm juist gevraagt naar UPS mogelijkheden met vliegwielen, deze optie heb je oa bij systemen boven de 1MW.
Zijn eigen mening was dat het systeem goed werkt, maar heel kritisch is op 1 punt, het vliegwiel moet wel aanslaan en heeft hier minder als 10 sec de tijd voor, waar je bij een UPS met accu's vaak meedere minuten(tenminste zo hoort het) de tijd hebt om je diesels op te laten starten.
Maw, dat systeem kan net zo storingsgevoelig zijn als een UPS systeem met accu's.(wie zegt overigens dat Evo geen systeem gebruikt met vliegwielen?).
En voordat we hier nog verder over speculazen, is het niet slim om te wachten of dit uberhaupt om een storing ging, of een human error.
Iedereen hier roept namelijk dat het aan de UPS lag, terwijl dat helemaal niet zo hoeft geweest te zijn, wel dat de UPS er iets mee te maken had.
(wie zegt overigens dat Evo geen systeem gebruikt met vliegwielen?)..
Ze hebben een uitgebreid UPS systeem in de kelder staan.
En wat als je genset niet start, denk je dat een beveiligingsmedewerker dat in een paar minuten gefixed heeft? (Of wat als er niemand in het DC is, zoals bij redelijk wat kleinere DCs zo is)
De storing bij 365 Main heb ik tenminste het idee van dat het tot op de bodem is uitgezocht en dat het nu zeker niet meer kan voorkomen, dat gevoel heb ik tot nu toe nog niet gehad bij de Nederlandse storingen (of dat nou Redbus, Evo, Easy of Grafix is). Nergens is duidelijk gezegd wat er mis is gegaan en waarom het mis kon gaan. Verklaringen als "storing in de UPS installatie" of "fout tijdens onderhoud" geven mij totaal geen lekker gevoel, zeker als Leaseweb (volgens sommigen hier) ook nog zegt dat feeds bijna niet uit kunnen vallen (zo'n oplossing is te realiseren met STS switches voor de gehele ruimte, wat bijvoorbeeld 365 Main heeft (en euNetworks naar mijn weten ook), maar blijkbaar is dat in Evo niet het geval)
En wat als je genset niet start, denk je dat een beveiligingsmedewerker dat in een paar minuten gefixed heeft? (Of wat als er niemand in het DC is, zoals bij redelijk wat kleinere DCs zo is)
De storing bij 365 Main heb ik tenminste het idee van dat het tot op de bodem is uitgezocht en dat het nu zeker niet meer kan voorkomen, dat gevoel heb ik tot nu toe nog niet gehad bij de Nederlandse storingen (of dat nou Redbus, Evo, Easy of Grafix is). Nergens is duidelijk gezegd wat er mis is gegaan en waarom het mis kon gaan. Verklaringen als "storing in de UPS installatie" of "fout tijdens onderhoud" geven mij totaal geen lekker gevoel, zeker als Leaseweb (volgens sommigen hier) ook nog zegt dat feeds bijna niet uit kunnen vallen (zo'n oplossing is te realiseren met STS switches voor de gehele ruimte, wat bijvoorbeeld 365 Main heeft (en euNetworks naar mijn weten ook), maar blijkbaar is dat in Evo niet het geval)
Misschien dat Main het nu wel op orde heeft, maar wat ik van mijn Amerikaanse collega's weet, is dat veel DC's in amerika de boel slechter op orde hebben als europese standaarden.
Zijn eigen mening was dat het systeem goed werkt, maar heel kritisch is op 1 punt, het vliegwiel moet wel aanslaan en heeft hier minder als 10 sec de tijd voor, waar je bij een UPS met accu's vaak meedere minuten(tenminste zo hoort het) de tijd hebt om je diesels op te laten starten.
Afaik draaien die vliegwielen altijd en zijn het er meerdere? :) Ze vangen de dips op door de kracht waarmee ze ronddraaien (magnetische kracht) en hebben een bepaalde tijd om de generatoren aan te doen slaan. Dat was in ieder geval geen 10 seconden, maar een stuk meer.
Het vliegwiel hoeft niet aan te slaan, die draait natuurlijk constant.
Als bijkomend voordeel heeft dit dat ook kleine onzuiverheden uit het net gefilterd worden.
De meeste vliegwiel systemen leveren 15 seconden lang hun maximale capaciteit, na 30 seconden is dit gehalveerd.
Vergeet ook niet dat veel grote DCs maar een paar minuten (2-5min) UPS/Accu autonomie hebben, echter kan je in 2 minuten natuurlijk meer doen dan in 15 seconden.
Maar nogmaals als het werkt zoals het hoort dan is een vliegwiel systeem gewoon zeer safe.
Dat 100% uptime voor onbepaalde tijd niet bestaat, ben ik met je eens.
Je kan aardig in de buurt komen als je gaat praten met partijen zoals Akamai. Kost een hoop, beetje tot geen downtime ever. Ik kan me in ieder geval geen downtime herinneren van de vele grote partijen die door Akamai gehost worden. Ja Microsoft een keertje maar dat was door een menselijke fout (DNS verhaaltje) maar verder. Dat dit niet om 60 euro per jaar pakketjes gaat lijkt me duidelijk. :D http://www.akamai.com/html/customers/index.html Kun je je voorstellen dat MySpace er uren uit ligt?
En ja met deze cijfers kun je ook een hoop investeren natuurlijk -> Revenue $428.672 Million USD (2006) http://www.akamai.com/. Is er een Nederlandse (hosting only) partij die hier ook maar in de buurt komt? En kwa data -> 650 Gbits per seconde?
Aanvulling: wat mij persoonlijk stoort is dat die uptime zo erg belangrijk word gemaakt terwijl het dat helemaal niet is voor de meeste klanten. Wat kun je ook verwachten voor dat absurd lage bedrag per maand? Op de vraag of wij 100% uptime kunnen bieden zeggen wij dan ook altijd ja. Het komt meestal niet tot een offerte hiervoor want na een goed verhaal is het de meeste klanten al heel erg duidelijk dat ze er met een paar honderd euro per jaar niet komen. :D
nee, geen hosting only party, maar ik kan je wel uit eigen ervaring vertellen dat de datacenters in de oude philips locaties in Eindhoven een 0.0% downtime hebben (let dus op de significantie)
dat is vergelijkbaar met akamai, maar helaas zijn deze centers niet publiekelijk toegankelijk en zeker niet voor hosting :D
Je kan aardig in de buurt komen als je gaat praten met partijen zoals Akamai. Kost een hoop, beetje tot geen downtime ever. Ik kan me in ieder geval geen downtime herinneren van de vele grote partijen die door Akamai gehost worden. Ja Microsoft een keertje maar dat was door een menselijke fout (DNS verhaaltje) maar verder. Dat dit niet om 60 euro per jaar pakketjes gaat lijkt me duidelijk. :D http://www.akamai.com/html/customers/index.html Kun je je voorstellen dat MySpace er uren uit ligt?
En ja met deze cijfers kun je ook een hoop investeren natuurlijk -> Revenue $428.672 Million USD (2006) http://www.akamai.com/. Is er een Nederlandse (hosting only) partij die hier ook maar in de buurt komt? En kwa data -> 650 Gbits per seconde?
Aanvulling: wat mij persoonlijk stoort is dat die uptime zo erg belangrijk word gemaakt terwijl het dat helemaal niet is voor de meeste klanten. Wat kun je ook verwachten voor dat absurd lage bedrag per maand? Op de vraag of wij 100% uptime kunnen bieden zeggen wij dan ook altijd ja. Het komt meestal niet tot een offerte hiervoor want na een goed verhaal is het de meeste klanten al heel erg duidelijk dat ze er met een paar honderd euro per jaar niet komen. :D
Beetje verkeerde vergelijking he, Akamai is een CDN, als er 1 volledige node uitvalt merkt inderdaad niemand dat, het word hoogstens wat trager, maar dan kunnen 'r wel zo een 100 tal servers plat liggen ;)
MediaServe
01/02/08, 17:18
wat mij persoonlijk stoort is dat die uptime zo erg belangrijk word gemaakt terwijl het dat helemaal niet is voor de meeste klanten.
Inderdaad, de e-mail wordt wel opgevangen door de fallback en dat je website er een paar minuten uit ligt? So what :) Maar bij stroomstoringen wordt het natuurlijk wel anders omdat er gewoon hardware kapot gaat en je bent vaak kostbare tijd kwijt (die je niet kunt inplannen) om de boel weer in orde te krijgen.
... een 0.0% downtime hebben (let dus op de significantie)
Dus niet meer dan 4,0 uur downtime per jaar, dat vind ik niet echt indrukwekkend hoor ;)
ah dus jij zit daar natuurlijk dik onder
in die 4 uur zitten dus ook alle onderhoudswindows aan de servers/mainframes zelf he, het is niet direct een maat voor de verbindingen naar buiten, die zijn namelijk afgleopen jaar 100% up geweest, geen enkele onderbreking
Afaik draaien die vliegwielen altijd en zijn het er meerdere? :) Ze vangen de dips op door de kracht waarmee ze ronddraaien (magnetische kracht) en hebben een bepaalde tijd om de generatoren aan te doen slaan. Dat was in ieder geval geen 10 seconden, maar een stuk meer.
Klopt, een vliegwiel staat constant aan dankzij de stroom die het net zelf levert. Valt de stroom van het net uit dan stopt de aansturing van het vliegwiel, maar door de hoeveelheid (kinetische?) energie die er nog in het wiel "zit" kan het vliegwiel de tijd overbruggen die de generatoren nodig hebben om op te starten, zodra de generatoren voldoende energie leveren wordt er beetje bij beetje overgegaan op de generatoren.
MediaServe
01/02/08, 18:05
ah dus jij zit daar natuurlijk dik onder
in die 4 uur zitten dus ook alle onderhoudswindows aan de servers/mainframes zelf he, het is niet direct een maat voor de verbindingen naar buiten, die zijn namelijk afgleopen jaar 100% up geweest, geen enkele onderbreking
Ik heb geen datacentrum ;)
De eerste jaren dat wij bij Easynet stonden hadden wij 0% downtime op de stroom, maar dan gewoon absoluut 0% downtime. Volgens mij hebben de meeste datacentra dit en zijn de storingen nog altijd een uitzondering. Ieder jaar downtime door storingen of onderhoud op het stroomcircuit vind ik belachelijk en onacceptabel. Als het een keer (eens in de vijf jaar) voorkomt vind ik acceptabel.
Swiftway-UK
01/02/08, 18:09
Ieder jaar downtime door storingen of onderhoud op het stroomcircuit vind ik belachelijk en onacceptabel. Als het een keer (eens in de vijf jaar) voorkomt vind ik acceptabel.
Dat vinden de meeste partijen, vandaar dat ook de stroomprijs van de datacentra in Nederland langzaam voor gebruikers aan richting de 75 euro per Ampere gaat, redundantie leveren op zo een grote schaal kost nu eenmaal veel geld.
Ik reken er nu al op dat de meeste (grote) DCs voor het eind van dit jaar 70 - 75 euro per Ampere gaan berekenen. Dan zul je direct ook minder stroomstoringen zien, althans, dat is mijn verwachting.
Ik kan jullie vertellen dat het LeaseWeb personeel met man en macht werkt om alle servers (SLA/non-SLA) terug te krijgen die hangen tijdens het booten of met andere problemen kampen.Wat valt onder "met andere problemen kampen"? Mijn server deed het perfect, is talloze malen gereboot geweest, geen aanpassingen geweest na de laatste reboot (op een Xen VM na), maar helaas zit ie nu met een corrupte MBR. De gekende "Grub >".
Nog zien hoe dat op te lossen valt, en hoe dat mogelijk was..
Je kan aardig in de buurt komen als je gaat praten met partijen zoals Akamai. Kost een hoop, beetje tot geen downtime ever. Ik kan me in ieder geval geen downtime herinneren van de vele grote partijen die door Akamai gehost worden. Ja Microsoft een keertje maar dat was door een menselijke fout (DNS verhaaltje) maar verder. Dat dit niet om 60 euro per jaar pakketjes gaat lijkt me duidelijk. :D http://www.akamai.com/html/customers/index.html Kun je je voorstellen dat MySpace er uren uit ligt?
Ja hoor, http://www.thewhir.com/marketwatch/072406_MySpace_Site_Suffers_Downtime.cfm
Akamai is overigens een CDN, een vergelijking met Nederlandse ISPs is in mijn ogen dus wat krom.
100% uptime is op de lange termijn niet te halen. Je kan het natuurlijk wel afspreken met je klant, maar je zult dan ook duidelijke afspraken moeten maken voor het geval dat je het niet haalt. Zolang er nog raketten uit de lucht vallen door softwarebugs en het internet nog is gebouwd op IP en BGP kun je nooit 100% uptime halen. Er kan altijd ergens iets mis gaan. Ook Akamai heeft problemen gehad, maar meestal zijn deze problemen wel redelijk lokaal, wat een voordeel is van hun opzet.
crazycoder
02/02/08, 10:23
Dat vinden de meeste partijen, vandaar dat ook de stroomprijs van de datacentra in Nederland langzaam voor gebruikers aan richting de 75 euro per Ampere gaat, redundantie leveren op zo een grote schaal kost nu eenmaal veel geld.
Ik reken er nu al op dat de meeste (grote) DCs voor het eind van dit jaar 70 - 75 euro per Ampere gaan berekenen. Dan zul je direct ook minder stroomstoringen zien, althans, dat is mijn verwachting.
De oude meuk vervangen en eindelijk leveren wat ze al jaren beloven bedoel je..
Is Hyves een referentiepunt geworden? :)
Aangezien hyves volgens mij de grootste site is die leaseweb host?
hyves IS sloom... ;)
tot down toe nu :)
Aangezien hyves volgens mij de grootste site is die leaseweb host?
tot down toe nu :)
En dat heeft niets met het netwerk te maken, maar puur de servers..
Goed, dit is geen Hyves topic ;)