Bekijk Volledige Versie : Storage Platform 5K Klanten
Wij zijn momenteel bezig met een project voor een webhosting bedrijf met ongeveer 5000 klanten. Nu is ons gevraagd naar een goede oplossing te vinden voor de centrale opslag van de gegevens e-mail/webruimte. Nu wordt momenteel gebruik gemaakt van 10 server die op de eigen harddisk de data opslaan, maar hier willen we graag vanaf. Momenteel draait er al een MSA1510I voor ons Xen cluster, maar dit zal alle tijden gescheiden moeten zijn.
Nu willen wij iets anders dan de HP MSA1510I, omdat het hier over een iets groter aantaal gebruikers gaat met veel write en read verkeer. Onze keuzen is gevallen op de merken.
Netapp
Dell EMC
We horen vaak goede verhalen over de Netapp, maar we zijn vooral benieuwd naar jullie ervaring op dit gebied. En dan vooral hoe is de stabiliteit van deze apparaten en wat raden jullie aan voor deze omgeving neer te zetten.
Wij hopen dan ook dat jullie ons een stoot in de goede richting kunnen geven. En of eventueel een leverancier weten waar je dit voor een paar dagen kan testen dit zou namelijk helemaal geweldig zijn.
Wat wil je gaan doen? NFS of iSCSI?
Wij draaien nu al bijna 2 jaar op EMC en dan voor 100% NFS, werkt geweldig! In 2 jaar tijd nog nooit een storing aan het apparaat gehad, is gewoon online wanneer je hem nodig hebt.
Wat wil je gaan doen? NFS of iSCSI?
Wij draaien nu al bijna 2 jaar op EMC en dan voor 100% NFS, werkt geweldig! In 2 jaar tijd nog nooit een storing aan het apparaat gehad, is gewoon online wanneer je hem nodig hebt.
We willen inderdaad ook voor NFS gaan, helemaal vergeten te melden. En hoe zijn de presenaties bij jullie qua snelheid en hoeveel servers hangen er aan ?
Ik heb, zoals zovelen, hele goede ervaringen met Equallogic. Wij zijn met 1 unit begonnen en hebben deze onlangs uitgebreid. De snelheid, de eenvoudig van het beheer, de mogelijkheden en de stabiliteit zijn gewoon top.
Het is wel een iSCSI-only doos. Wij gebruiken 't op clusters in combinatie met cluster filesystems zoals OCFS2 (ook toppie).
Edit: Ik lees dat je voor NFS gaat. Kijk dan ook zeker eens bij Nimbus. Vergelijkbaar met Equallogic kwa techniek en voorzien van 10Gbit aansluitingen:
http://www.storagemanagement.nl/Nimbus.html
http://www.nimbusdata.com/
We willen inderdaad ook voor NFS gaan, helemaal vergeten te melden. En hoe zijn de presenaties bij jullie qua snelheid en hoeveel servers hangen er aan ?De prestaties zijn prima, niets op aan te merken.
Wij hangen er in totaal 60 servers aan die allemaal NFS doen.
We doen in totaal iets van 10.000 NFS IOps en 2500 disk IOps.
Kijk, hier kunnen we wat mee, we hebben woensdag een gesprek/presentatie bij dell over het EMC en Equallogic Apparatuur. Dus we zijn erg benieuwd. Bedankt voor jullie tijd!!!
Kijk, hier kunnen we wat mee, we hebben woensdag een gesprek/presentatie bij dell over het EMC en Equallogic Apparatuur. Dus we zijn erg benieuwd. Bedankt voor jullie tijd!!!
Ik vond zelf die presentatie erg tegenvallen, was meer een sales praatje dan demo.
Als je een demo van een equallogic wil moet je eens contact opnemen met Hans Voordouw van storagemanagement.nl die komen op locatie met een EQ zodat je zelf kunt kijken/spelen.
je geeft zelf aan aan NFS te willen doen, houd er rekening mee dat een EQ een SAN is, en dus native geen NFS doet. Je zult er dus zelf een NFS head/gateway aan moeten hangen.
De nimbus van storagemanagement doet dit wel, is een erg mooi apparaat en in sommige gevallen best gunstig geprijst.
En meet eens je iops verbruik, je wil natuurlijk geen apparaat die achteraf te weinig performance heeft omdat je niet gemeten hebt ;-)
Ik vond zelf die presentatie erg tegenvallen, was meer een sales praatje dan demo.
Als je een demo van een equallogic wil moet je eens contact opnemen met Hans Voordouw van storagemanagement.nl die komen op locatie met een EQ zodat je zelf kunt kijken/spelen.
je geeft zelf aan aan NFS te willen doen, houd er rekening mee dat een EQ een SAN is, en dus native geen NFS doet. Je zult er dus zelf een NFS head/gateway aan moeten hangen.
De nimbus van storagemanagement doet dit wel, is een erg mooi apparaat en in sommige gevallen best gunstig geprijst.
En meet eens je iops verbruik, je wil natuurlijk geen apparaat die achteraf te weinig performance heeft omdat je niet gemeten hebt ;-)
Weet je misschien een goede iops meter waar ik dit mee kan berekenen ? En waar je zelf ervaring mee heb ? Nog bedankt voor de tip , we gaan zeker contact met deze man opnemen na woensdag om eens tot een concreet besluit te komen.
Zelf hebben wij laatst MSA1500's en MSA1510i's vervangen door de EVA 4100 en EVA 4400 van HP. We zijn wel helemaal over naar FiberChannel, want SCSI voor sloebers bracht toch te veel problemen met zich mee.
Zelf hebben wij laatst MSA1500's en MSA1510i's vervangen door de EVA 4100 en EVA 4400 van HP. We zijn wel helemaal over naar FiberChannel, want SCSI voor sloebers bracht toch te veel problemen met zich mee.
Je maakt me wel erg nieuwsgierig.
Wij hebben iSCSI simpelweg gekozen omdat het volgens ons de betere keuze is. Het is heel eenvoudig en handig in beheer, het is erg snel (een goede iSCSI oplossing doet niet onder voor een fiberchannel oplossing) en het heeft ons nog geen enkel bitje in de steek gelaten. We werken met redundante Cisco switches.
Ik zie zeker met de komst van 10Gb iSCSI echt geen reden meer om voor fiberchannel te kiezen. Tenzij je hier alle kennis en switches voor in huis hebt en niet in een nieuwe ethernet infrastructuur wilt investeren wellicht. Dell ziet dat ook in, die hebben Equallogic niet voor niets overgenomen. Daar zit mijn inziens de toekomst.
Weet je misschien een goede iops meter waar ik dit mee kan berekenen ? En waar je zelf ervaring mee heb ? Nog bedankt voor de tip , we gaan zeker contact met deze man opnemen na woensdag om eens tot een concreet besluit te komen.
iostat, of direct /proc/diskstats uitlezen en parsen. Ik weet niet of er nog meer/betere methodes zijn.
Wij zijn zijn nog bezig met het uitzoeken van een goede oplossing, maar sluiten zelfbouw ook nog steeds niet uit.
Je kan ook even kijken naar budgetvriendelijke Supermicro Open-E servers, wij hebben deze getest op performance en halen 500MB/s read/write sustained. Cached is uiteraard hoger.
Heb het niet heel uitgebreid getest, maar met iometer 4gb testfile haalde we meer dan 60 000 iops via 4 x 1 Gbit verbindingen en software (!) iscsi. 10GB netwerk is mogelijk voor amper kleine 400 euro.
Performantie op iscsi clients zat ongeveer op 150MB/sec per Gbit verbinding (full duplex).
( deze instellingen: http://communities.vmware.com/thread/73745?tstart=0&start=0 )
DennisWijnberg
08/09/08, 13:32
Wij gebruiken zowel Nimbus als Equallogic voor onze storage en ik moet zeggen dat het ook super werkt!
ik weet niet wat het is maar zelf vind fibre toch beter.
Met iscsi toch wat rare dingen meegemaakt, uitval e.d. die niet te verklaren waren.
Al praat ik wel alweer over 1 a 2 jaar terug ivm iscsi, het kan natuurlijk zijn dat het nu een stuk beter is geworden
iscsi is een protocol, geen kabel ;)
Je kan perfect iscsi over fiber doen, alsook over copper, 1Gbit en 10Gbit netwerk en Infiniband. Er zijn waarschijnlijk nog andere, maar daarmee helaas geen ervaring.
Het enige wat je niet moet doen is iSCSI verkeer mixen. En je moet goede switches gebruiken. Als je dat doet dan is 't gewoon enorm betrouwbaar.
Ahead-IT: Ik heb enkele Open-E Supermicro's met raid50 enzo, maar ze zijn echt heel erg veel minder snel dan een echte SAN doos. Da's niet erg, want ze zijn ook veel goedkoper, maar ze zijn niet echt inzetbaar voor grotere omgevingen. Ik gebruik ze zelf wel eens voor virtualisatie setups van een paar VM's op een kantooromgeving.
Het enige wat je niet moet doen is iSCSI verkeer mixen. En je moet goede switches gebruiken. Als je dat doet dan is 't gewoon enorm betrouwbaar.
Ahead-IT: Ik heb enkele Open-E Supermicro's met raid50 enzo, maar ze zijn echt heel erg veel minder snel dan een echte SAN doos. Da's niet erg, want ze zijn ook veel goedkoper, maar ze zijn niet echt inzetbaar voor grotere omgevingen. Ik gebruik ze zelf wel eens voor virtualisatie setups van een paar VM's op een kantooromgeving.
Gebruikt die Supermicro wel dezelfde schijven, RAID controllers en NICs als de "echte" SAN? Zo niet, dan kun je die vergelijking natuurlijk niet maken.
Gebruikt die Supermicro wel dezelfde schijven, RAID controllers en NICs als de "echte" SAN? Zo niet, dan kun je die vergelijking natuurlijk niet maken.
Wel het zelfde aantal disks, maar juist de raidcontroller en nics maken een echt SAN zo anders. Bovendien is de hele architectuur van een EMC, Equallogic, Nimbus, whatever, zo anders dat je het niet met een Open-E doos of andere oplossing kunt vergelijken.
En dan heb je natuurlijk nog de redundancy. Open-E dozen kun je niet uitrusten met 2 controllers.
Maar nogmaals, voor simpelere dingen zijn ze prima geschikt.
En dan heb je natuurlijk nog de redundancy. Open-E dozen kun je niet uitrusten met 2 controllers.
Toch wel, je moet gewoon weten hoe ;)
De controller én de server maken inderdaad de performantie, ik spreek hier dus niet over single socket SATA based servers met 4Gb RAM, maar over servers met minimaal dual quadcore cpu, min. 8 x SAS en 24GB cache. Anders ga je natuurlijk appelen met peren vergelijken, de echte storage oplossingen hebben ook dergelijke hardware.
En zoals ik zeg, we hebben ze getest met een high-level setup ... en de resultaten zijn ernaar! Wie wil testen, één adres: www.trysupermicro.eu ;)
Ik bedoel met dubbele controllers niet een dubbele raid controller maar dubbele controllers in de zin van volledige redundantie in zo'n doos. Daarbij is een controller dus een moederbord, processor, geheugen, accu en software.
P.s Al onze servers zijn supermicro. Veelal dikke bakken. Niet dat je denkt dat ik niet van SM's houd. :P Ook die storage dozen zijn leuk, maar ik probeer even 't verschil uit te leggen.
Daarnaast gaat het niet om hw, maar ook veel software. De dedicated NAS/SAN systemen zijn vele malen beter in caching, dan je normale Linux systeem.
Ik raad de TS wel aan om een NAS systeem te nemen van EMC danwel NetApp als je NFS wil doen, als je een SAN (iSCSI) doos neemt, moet je daarvoor weer je eigen NFS server gaan maken, wat weer een performance risico wordt.
Dat is dan weer helemaal waar. Of een cluster filesystem overwegen.
bedankt voor all toevoegingen, we zijn inderdaad momenteel aan het kijken of we eventueel voor iscsi gaan of voor nfs, omdat iscsi hier al ervaring mee is (HP MSA 1510I) en bevalt ook wel goed. Maar we moeten gewoon even echt zeker zijn van een goed snel en stabiel systeem, daarom zijn alle ervaringen van harten welkom.
Je weet wel dat iSCSI en NFS totaal iets anders zijn? Als je meerdere servers tegelijk bij de zelfde data wil hebben kan je gaan voor NFS, scheelt je client-side voor veel configuratie werk.
Je kan natuurlijk ook een Cluster filesystem gebruiken boven op iSCSI, maar daarvoor moet je client-side weer een hoop configureren.
Hoi Wido,
De prestaties zijn prima, niets op aan te merken.
Wij hangen er in totaal 60 servers aan die allemaal NFS doen.
We doen in totaal iets van 10.000 NFS IOps en 2500 disk IOps.
draaien de Xen machines ook via NFS?
Hoi Wido,
draaien de Xen machines ook via NFS?Nee, dat heb ik nooit goed voor elkaar gekregen.
Onze mail en webhosting data draait allemaal via NFS.
Je kan natuurlijk ook een Cluster filesystem gebruiken boven op iSCSI, maar daarvoor moet je client-side weer een hoop configureren.
Je moet wel configureren, maar heb je OCFS2 wel 's gebruikt? Is erg cool. Simpel, heel snel, stoer, enzovoort. :P Werkt echt perfect.
Je moet wel configureren, maar heb je OCFS2 wel 's gebruikt? Is erg cool. Simpel, heel snel, stoer, enzovoort. :P Werkt echt perfect.Nee, ik heb het nog nooit gebruikt.
Wat ik een groot voordeel aan NFS vindt is de root_squash, zo is je data nog veilig wanneer een van je front-end servers gehacked wordt.
Dat is iets wat ik aan een ClusterFS gevaarlijk vindt, als iemand die box comprised, dan kan hij al je data om zeep helpen.
Bedankt voor alle informatie nogmaals, Nu zitten wij met een offerten van Dell voor een Equallogic, nu is vooral onze vraag weet iemand wat voor schrijven hier voor worden gebruikt en vooral wat het merk hier van is ? We hebben namelijk een enige discussie met Dell over de prijs.
DennisWijnberg
18/09/08, 11:29
Beste stefklep,
We hebben hier een paar gecertificeerde Dell Equallogic goeroes zitten, die kunnen je er alles over vertellen! Neem even contact op als je meer wilt weten, 088-7877674.
Bedankt voor alle informatie nogmaals, Nu zitten wij met een offerten van Dell voor een Equallogic, nu is vooral onze vraag weet iemand wat voor schrijven hier voor worden gebruikt en vooral wat het merk hier van is ? We hebben namelijk een enige discussie met Dell over de prijs.
Merken schijven willen nog wel eens varieren van release tot release en periode van HW. Ik heb hier vroeger ook een Netapp gehad waar een gedeelte seagates, fujitsu's en quantums in zat, allen wel op 34G/10KRPM gespec'd.
Ook bij DELL servers zelf zie ik vaak genoeg merk verschil in schijven. Dus zou me niks verbazen als dat bij de storage ook zo is.
DennisWijnberg
18/09/08, 11:59
Klopt, het is inderdaad zo dat er verschillende schijven worden gebruikt. Ze worden overigens wel altijd gebrand door Equallogic. Ze kijken naar welke leverancier de beste schijven kan leveren.
Laat je overigens niet "pakken" door de prijs van Dell. Dit kan nog enorm veel schelen. Dell mag zelf veel minder korting geven dan partners mogen.
Let wel dat je niet moet kijken naar de disks en voor welke prijs je ze inkoopt. Ikzelf kon destijds moeilijk verkroppen dat disks die 200 gig per stuk groter zijn gelijk je unit 5k duurder maken, maar so be it. Elders pakken ze je op licenties, weer ergens anders op een andere manier. Ze moeten toch hun geld verdienen.
Ik geloof dat onze PS100e equallogic Western Digital's heeft en onze PS5000-E Seagates ofzo. Maakt ook niet uit, ze zijn snel en uitvoerig getest. Tot op heden met 30 disks zonder problemen.
Bedankt voor alle informatie nogmaals, Nu zitten wij met een offerten van Dell voor een Equallogic, nu is vooral onze vraag weet iemand wat voor schrijven hier voor worden gebruikt en vooral wat het merk hier van is ? We hebben namelijk een enige discussie met Dell over de prijs.
heb je al eens met hans van storage management gebelt? wellicht dat hij je een betere offerte kan toedoen. Zoals al aangegeven is hier. Partners kunnen vaker een mooiere prijs maken dan dell zelf.
DennisWijnberg
18/09/08, 12:59
Het kan een behoorlijk percentage schelen. Dell kan maximaal 10% geven, terwijl tier1 partners verder mogen gaan, zeker als daar ook nog levering van hardware voor nodes o.i.d. bij komt.
Plus dat 't contact naar mijn mening een stuk prettiger is. Ik wordt echt niet blij meer van Dell met al zijn consultants, elke dag bellen en dat soort gezeik. Da's ook wat waard als je zo'n investering doet.
DennisWijnberg
18/09/08, 13:26
Plus dat 't contact naar mijn mening een stuk prettiger is. Ik wordt echt niet blij meer van Dell met al zijn consultants, elke dag bellen en dat soort gezeik. Da's ook wat waard als je zo'n investering doet.
Absoluut!