Onderwerp: Ervaring met Nexenta

Voor een paar VPS platformen ben ik momenteel een beetje aan het rondkijken voor recente 100% HA setupjes en kwam zo op Nexenta uit.

Heeft iemand hier al ervaring meer, is het de prijs waard, zijn er betere EN goedkopere oplossingen?

Het licentieverhaal van nexenta is niet direct iets waar ik erg happy van wordt, want dat lijkt op een 7-8k voor een 4TB storage en 1,5K per jaar uit te komen. Dat lijkt me een beetje zonde van het geld aangezien ik minimaal 3 onafhankelijk HA omgevingen nodig heb.

Iemand ervaring met dit spul of gelijkwaardigs?

Oorspronkelijk geplaatst door systemdeveloper

Voor een paar VPS platformen ben ik momenteel een beetje aan het rondkijken voor recente 100% HA setupjes en kwam zo op Nexenta uit.

Heeft iemand hier al ervaring meer, is het de prijs waard, zijn er betere EN goedkopere oplossingen?

Het licentieverhaal van nexenta is niet direct iets waar ik erg happy van wordt, want dat lijkt op een 7-8k voor een 4TB storage en 1,5K per jaar uit te komen. Dat lijkt me een beetje zonde van het geld aangezien ik minimaal 3 onafhankelijk HA omgevingen nodig heb.

Iemand ervaring met dit spul of gelijkwaardigs?

Randy heeft kennis/ervaring mbt VMWare als ik me niet vergis. Daar zou het ook mee moeten kunnen denk ik (maar de prijs weet ik niet).

Afhankelijk van de eisen (100% HA is mogelijk) zou een setup bestaande uit een paar systemen ook opgezet kunnen worden op basis van KVM met losse storage. De licentie kosten zijn een relatief klein deel van de kosten verwacht ik, de grootste kosten posten zijn toch de inhuur van kennis (indien afwezig). Wij hebben een setup die HA is (voor zover mogelijk binnen 1 DC/netwerk) voor de storage units en de hoogste kosten blijven toch echt de kosten voor kennis/uren.

Tot slot: iedere HA omgeving is afhankelijk van de zwakste schakel, valt een server gedeeltelijk uit (raid controller valt bijv. uit) terwijl het OS door draait dan kan het ondanks de theoretisch correcte opzet in de praktijk nog downtime opleveren (helaas).

Wij gebruiken nu xenserver op een 20 tal nodes met 4 open-e storages. Er kan uiteraard altijd wel iets mis gaan maar meestal ligt dit dan toch aan externe factoren (buiten de racks, zeg maar).
Nexenta heeft een leuke storage oplossing, die is 100% HA (ik heb het niet over de nodes dus,he), maar voor een 4TB oplossing kijk ik naar een 8k per storage, 7,5k voor een 'HA licentie' en 1,5K per jaar aan verplicht support.

Open-E heeft ook licentiekosten maar dan spreek je over een 1400 euro eenmalig voor 2 x een 16TB licentie. Heb ik ook een 4 tal van draaien, werkt ook wel goed trouwens, maar ik was op zoek naar iets heftigers/kant-en-klaar gedoe.

De 'gratis' oplossing met drdb en hb werkt zelfs goed, al schaalt dat voor geen reet, maar wat Nexenta betreft heb ik alleen wat 'hear say' dat het zo geweldig is en dat is van de leverancier die het ons al een half jaar probeert te verkopen

Vandaar dat ik een beetje benieuwd was naar praktijk ervaringen met dat spul.
Ik hoor wel vaker 'mooie' verhaaltjes

Je kan toch ook even testen met de gratis versie (tot 1TB dacht ik), zo leer je de (web)interface kennen en hoe hij het doet. Voor mij persoonlijk was het niet direct wat ik zocht en ben dus maar bij freenas gebleven.

Je zou ook kunnen kijken naar storage oplossingen van sun (oracle) die gebruik maken van zfs, denk dat dit kwa kosten goedkoper kan uitvallen.

En zeg ook even tegen je leverancier dat 100% HA niet bestaat, er is altijd een kans dat het mis gaat. Overlaatst nog een kennis gezien en die hadden op het bedrijf een nieuwe raid60 storage gezet omdat dit ook zo veilig was. Ze hebben 1 keer een stroomstoot gehad en resultaat was voeding, 4 raidcontrolers en 10 HD's kapot van het storage device. Gevolg niets meer te redden, gelukkig nemen ze iedere dag nog een goede ouderwetse tape backup.

Oorspronkelijk geplaatst door The-BosS

En zeg ook even tegen je leverancier dat 100% HA niet bestaat, er is altijd een kans dat het mis gaat.

Zelf hebben we meegemaakt dat 2 systemen die als storage dienst doen en redundant draaien uitvielen doordat 1 systeem geen hardeschijven meer zag (vond drbd niet zo leuk). Helaas werd dit niet automatisch gedetecteerd door hb hierdoor viel op een gegeven moment het geheel praktisch uit want hij kon de data niet meer kopieren naar de andere server. Nadat er een reboot op de een was uitgevoerd ging hij alles rebuilden (terwil alles weer draaide).

De downtime neemt dan toch behoorlijk wat tijd/energie in (eerst probleem uitzoeken, dan nog oplossen en alle VPSen opnieuw opstarten).

Maar dan bedoel je dus dat beiden storages op hetzelfde stroom circuit zitten en beide ook nog eens kapot zijn gegaan? Dat is volgens mij dan meer een elektrisch probleem in de voeding. Maar dan nog, 1 storage zou gewoon in rook moeten kunnen opgaan natuurlijk.

FreeNAS heb ik ook nog ergens draaien. In principe ben ik daar meer tevreden over dan de Open-E dozen, maar dat kan ook wel een beetje met mijn FreeBSD fetisisme te maken hebben

De 'remote handson' die de utpkabels overramt omdat ze tussen de rackdeur zitten of een utp in een verkeerde switchpoort steekt (ander vlan bv) kan ook voor genoeg downtijd zorgen. Op die fiets haal je ook geen 100% uiteraard

Oorspronkelijk geplaatst door systemdeveloper

FreeNAS heb ik ook nog ergens draaien. In principe ben ik daar meer tevreden over dan de Open-E dozen, maar dat kan ook wel een beetje met mijn FreeBSD fetisisme te maken hebben

Same here, maar heb ergens vernomen dat FreeNAS zou verder gaan onder debian om zfs beter te gaan supporten. Dus lijkt dan meer naar de nexenta kant van het verhaal te gaan kwa os/drivers. En dat de FreeNAS BSD versie onder andere naam zou verder gaan.

Oorspronkelijk geplaatst door The-BosS

Same here, maar heb ergens vernomen dat FreeNAS zou verder gaan onder debian om zfs beter te gaan supporten. Dus lijkt dan meer naar de nexenta kant van het verhaal te gaan kwa os/drivers. En dat de FreeNAS BSD versie onder andere naam zou verder gaan.

Damn, het ik net het genot dat FreeNAS eindelijk eens goed met Xenserver overweg kan op iSCSI gebied...wordt het debian, haha

Oorspronkelijk geplaatst door systemdeveloper

Damn, het ik net het genot dat FreeNAS eindelijk eens goed met Xenserver overweg kan op iSCSI gebied...wordt het debian, haha

Mwah, niemand verplicht je om je huidige versie te upgraden

Oorspronkelijk geplaatst door systemdeveloper

Damn, het ik net het genot dat FreeNAS eindelijk eens goed met Xenserver overweg kan op iSCSI gebied...wordt het debian, haha

Even een paar url's met forum uitleg:
http://sourceforge.net/apps/phpbb/fr...php?f=5&t=3966
http://linux.slashdot.org/story/09/1...o-Debian-Linux

nieuwe freenas is nu dus http://www.corenas.org/, staat trouwens ook een artikel in over FreeNAS vs NexentaStor (community edition)

Ik heb het idee dat de website van Nexenta zelf nogal 'dure' prijzen hanteerd, je kan beter eens contact opnemen met enkele leveranciers, wij krijgen als het goed is deze week een Nexentadoosje geleverd via s3s.be, voor de prijs dat hun de hardware en licentie leveren zou ik t niet los kunnen doen (zelf componenten halen en de licentie via nexenta) dus ik vermoed dat daar veel op te halen valt.

s3s.be is volgens mij een redelijke schuiver, in Nederland heb je Inprove.nl heb het idee dat die een enorme nexenta kennis hebben, maar daar betaal je natuurlijk ook voor.

Oorspronkelijk geplaatst door Powermage

Ik heb het idee dat de website van Nexenta zelf nogal 'dure' prijzen hanteerd, je kan beter eens contact opnemen met enkele leveranciers, wij krijgen als het goed is deze week een Nexentadoosje geleverd via s3s.be, voor de prijs dat hun de hardware en licentie leveren zou ik t niet los kunnen doen (zelf componenten halen en de licentie via nexenta) dus ik vermoed dat daar veel op te halen valt.

s3s.be is volgens mij een redelijke schuiver, in Nederland heb je Inprove.nl heb het idee dat die een enorme nexenta kennis hebben, maar daar betaal je natuurlijk ook voor.

Van s3 kreeg ik voor een 4TB ha oplossing al direct te maken met 9k aan licenties. 2 x ruim 1500 voor 2 x 4tb gold support, een HA cluster Plugin (?) die nog eens ruim 4000 kost en bijna 1500 jaarlijks voor een support fee... Allemaal los van de hardware nog, want die heb je toch nodig.
Eenzelfde setup met Open-E kost eenmalig 1200 euro.
Ik wil best wat centen op tafel leggen hoor, maar niet 6K voor een interface alleen.
Deze kreeg ik:
Nexenta Licences
- 2 x 4TB Gold Support 24x4x7 (8TB netto)
2 x € 1.554,43 exc. VAT
- HA Cluster Plugin : € 4008,82 exc. VAT
Total : € 7.117,68 exc. VAT
Annual fee support: € 1.423.53 exc. VAT

voor zo'n bakkies:

LSI 630J JBOD enclosure 3.5” SAS-2
- 12 x 3.5” HDD SAS / SSD
- Single or Dual ESM
- Two host interfaces 6Gb’s per ESM
- One expansion interface per ESM
- 12 x 600GB Seagate SAS-2 15Krpm
- Up to 512 devices per channel
- 3 – years warranty
- List price: € 8.599,00 exc. VAT per JBOD

Beste John,

Nexenta is een investering die je doet voor je storage area network, je betaald ieder jaar voor software assurance en support (24x7x4) ongeacht wat je hardware is. M.a.w. als je hardware wil vervangen door betere hardware, of na 3 jaar je bestaande hardware wil vervangen kan je je software licentie blijven gebruiken en ben je het niet kwijt. Het is dus een lange termijn investering die elke cent waard is, want het bespaart uiteindelijk in hardware kost (die kapot gaat) en in stroomverbuik (minder hardware nodig)

ik wil nog even benadrukken dat door het gebruik van Nexenta uw hardware kosten naar omlaag gaan door volgende punten:
- SSD caching verhoogt de IOPS (10.000 iops per vhost is perfect haalbaar)
- inline deduplication & compression verlagen de behoefte van capaciteit zeker in vm omgeving
- peformance door caching verminderd ook de noodzaak aan SAS disken omwille van de verhoogde IOPS via SSD.
- replicatie synchroon en asynchroon naar een andere storage over IP kunnen uw schrik van data verlies volledig weghalen indien HA te duur is.

Maar mijn evaring met Nexenta is alleen positief te noemen, zeker met vmware en Xen kunnen we gerust een aantal klanten aantonen die dit met alle plezier bevestigen.

tot slot, HA is 100% hardware&Software fouten redundant (4 losse hardware components) maar kost geld!

Oorspronkelijk geplaatst door The-BosS

Je kan toch ook even testen met de gratis versie (tot 1TB dacht ik), zo leer je de (web)interface kennen en hoe hij het doet. Voor mij persoonlijk was het niet direct wat ik zocht en ben dus maar bij freenas gebleven.

Je zou ook kunnen kijken naar storage oplossingen van sun (oracle) die gebruik maken van zfs, denk dat dit kwa kosten goedkoper kan uitvallen.

En zeg ook even tegen je leverancier dat 100% HA niet bestaat, er is altijd een kans dat het mis gaat. Overlaatst nog een kennis gezien en die hadden op het bedrijf een nieuwe raid60 storage gezet omdat dit ook zo veilig was. Ze hebben 1 keer een stroomstoot gehad en resultaat was voeding, 4 raidcontrolers en 10 HD's kapot van het storage device. Gevolg niets meer te redden, gelukkig nemen ze iedere dag nog een goede ouderwetse tape backup.

Beste,

voor de duidelijkheid is Nexenta niet getrouwd met Hardware raid controllers, ZFS zit totaal anders in elkaar, in geval van bovenstaand probleem zit je met een 4 onafhankelijke onderdelen die elk perfect van elkaar gescheiden kunnen zijn van stroom en netwerk. een hardware raid controller kan inderdaad bij stroomstoot de raid set omzeep helpen (meermaals gezien) . Bij Nexenta zit je met een operating system die tot op het block niveau op de hoogte is van zijn data. Als de stroom wegvalt zitten er beveiligingen in om je data consistent te houden.

We spreken over 100% redundantie , maar bv. een brand/stroom kan natuurlijk wel alles kapot maken.

Ik ga in de komende 2 weken eens wat spul testen hier testen. Blijft leuk spul allemaal, ook Nexenta, maar uiteindelijk gaat de klant voor de kosten opdraaien, dus daar moet ik uiteraard ook een beetje rekening mee houden.