Bekijk Volledige Versie : Hosting op SSD's - Betrouwbaarheid ?
Een jaar geleden werd er door een klant een hosting setup gebouwd met 8x Samsung 850 PRO SSD's in RAID10 configuratie.
Vorige week werd de raid setup plots ontoegankelijk. Geen enkele SSD kan nog gevonden worden in de bios. Het lijkt wel of alle 8 SSD's gelijktijdig defect zijn gegaan. Ook in andere servers worden de SSD's niet meer gevonden...
2 maanden geleden een gelijkaardig probleem bij een andere klant met 2x Samsung 850 PRO SSD's in mirror raid. Ook van de ene dag op de andere beide SSD's schijnbaar defect. Niet meer te vinden in de bios.
5 maanden geleden bij nog een andere klant hetzelfde probleem. Opnieuw met Samsung SSD's. Het waren de 840 Pro geloof ik.
Dat de SSD's in mirror steeds gelijktijdig defect gaan is wel zeer bizar te noemen. Samsung denkt aan stroomstoringen, maar dan zouden er ook andere servers problemen moeten hebben, toch? Het kan hen verder ook niet schelen. Als ze binnen garantie zijn worden ze wel vervangen, maar voor data recuperatie (als dit nodig zou zijn) bieden ze totaal geen opties.
We hebben de setup die vorige week defect ging bij 5 data recuperatie bedrijven binnen gebracht voor een analyse. Ze besluiten dat het nodig is om de geheugenchips te desolderen en in speciale toestellen uit te lezen. Kostprijs: 4000 euro per SSD.
Welke SSD's gebruiken jullie in jullie servers? Wij gebruiken zelf Intel SSD's, maar steeds meer en meer klanten gebruiken hier Samsung SSD's. Ik denk dat we best een grote waarschuwing sturen naar onze klanten gezien de hoeveelheid problemen die we met de samsung ssd's zien?
pannenkoek
13/10/15, 11:41
Bij mirror blijven de iops het zelfde waardoor ze gelijk/samen stuk gaan.
Uit ervaring weet ik wel dat Samsung minder lang mee gaan dan Intel.
Beste is ook om TRIM te gebruiken voor je SSDs als deze het ondersteunen.
Word ook vaak afgeraden om raid te gebruiken voor SSDs.
Wij gebruiken uitsluitend Intel SSD's (DC S3500/S3700). Fabrikanten van grote flash storage arrays gebruiken meestal disks van 2 verschillende merken in elke mirror.
Wij gebruiken veel Kingston, alleen in RAID10, maar totaal geen problemen mee. Enkele keer valt er eens 1 uit.
Wij gebruiken ook SSD's van verschillende merken, gewoon voor de zekerheid en om dit soort problemen te voorkomen. Gelukkig hebben we er tot op heden geen last van gehad :)
Erg vreemd dat deze allemaal tegelijk defect zijn gegaan. Als er problemen zijn met de stroomvoorziening verwacht ik dat er meer servers/apparaten hier last van hebben. Is er elke keer dezelfde RAID controller gebruikt? Als je een UPS voor de servers hebt staan, kan je een stroomstoring al bijna uitsluiten.
Hier Intel SSD's in gebruik.
dennis0162
13/10/15, 13:06
SSD's hebben een maximaal aantal schrijfbewerkingen, als je van hetzelfde merk 2 SSD's in Raid 1 gebruikt zullen ze beide tegelijk kapot gaan.
Het beste is om 1 gebruikte van een paar weken en 1 nieuwe of 2 verschillende merken/types in een RAID array.
SSD's hebben een maximaal aantal schrijfbewerkingen, als je van hetzelfde merk 2 SSD's in Raid 1 gebruikt zullen ze beide tegelijk kapot gaan.
Het beste is om 1 gebruikte van een paar weken en 1 nieuwe of 2 verschillende merken/types in een RAID array.
zo gaat de vlieger niet helemaal op. Als de wear level 0 is, wil nog niet zeggen dat je ssd stuk is. Genoeg testen waarbij de ssd op zou zijn, maar ze 100tb;s door buffelen. Gezien ze allemaal tegelijk stoppen met werken zou ik het echt in een andere hoek gaan zoeken. Stroom, of raid controller. Misschien dat je raid controller ze in een panic mode drukken en daardoor niet meer toegankelijk worden...
Tim.Bracquez
13/10/15, 14:40
Meerdere merken gebruiken door elkaar, zo met schijven ook. Of toch niet uit dezelfde batch gebruiken...
Allemaal tegelijk is inderdaad wel een lastige om op te lossen. Zoizo altijd goed om backups voorhande te hebben uiteraard.
Waar de storing precies ligt is in jouw geval moeilijk in te schatten zo.
Voor onze productie omgeving hebben we High Endurance SSD's aangeschaft welke minimaal 10 DWPD aan kunnen.
Dit soort schijven worden dan ook standaard in server en storage omgevingen gebruikt. De risico op uitval is dan veel kleiner als een consumenten SSD.
pannenkoek: TRIM is alleen leuk voor Windows. met linux, VMware en Storage devices heb je daar helaas niks aan.
Zelf zetten we ook steeds twee verschillende merken SSD's in een mirror set. Zo hebben we ook nog nooit meegemaakt wat ik hierboven beschreef.
Maar het valt me wel op dat het stuk voor stuk klanten zijn met samsung SSD's. Ik denk dat wij toch samsung ssd's zullen afraden aan klanten, voorlopig toch.
De klant die vorige week zijn hele raid systeem verloren heeft zit nu met de vraag wat hij best doet met een server waar 4x 512Gb samsung 850 PRO SSD's in raid10 in zitten. Hij is nu, begrijpelijk ook, bang dat ook deze raid set binnenkort opgeeft.
Ik zou hem willen aanraden om 2x 512Gb Samsung SSD te behouden maar er ook 2x Intel aan toe te voegen. Zodat hij die raid10 set ervoor kan zorgen dat elk paar bestaat uit 1x Samsung + 1x Intel.
Maar zo te zien heeft Intel geen 512Gb SSD's maar wel bijvoorbeeld 480Gb?
Al onze servers hebben minimaal 2SSD's. Die voornamelijk gebruikt worden voor caching. We vervangen ongeveer 1 per jaar maar verder nooit problemen mee.
Bij een vorige werkgever hadden wij ook problemen met de levensduur van een deel van de SSD's. Met name de Kingstons, Samsungs en OCZ gingen met enige regelmaat kapot. Deze werden meestal gebruikt i.c.m. een Areca ARC-1220 RAID controller.
We hebben nog nooit gehad dat ze beide tegelijk kapot gingen. Wel dat de RAID controller kapot gingen en de schijven meenamen...
Kingston en OCZ gaan we hier uit ervaring uit de weg. 99% van de servers heeft Crucial of higherends Micron onder de motorkap. Dat alles in een keer onderuit gaat, dat klinkt meer als een controller probleem. Ik adviseer vaker om in deze gevallen een HBA te gebruiken en redundancy to zoeken op OS niveau. Dan blijft de TRIM support behouden.
PimEffting
14/11/15, 17:21
In onze cloud storage pool hebben we veel Crucial SSDs (100+).
In drie jaar tijd maar eentje kapot terwijl er toch veel IO over gaat.
tomadmiraal
14/11/15, 19:36
In onze cloud storage pool hebben we veel Crucial SSDs (100+).
In drie jaar tijd maar eentje kapot terwijl er toch veel IO over gaat.
Welke crucial ssd gebruiken jullie precies?
Ik heb vanaf de X25-M serie alleen maar Intel gebruikt, nog nooit 1 kapot gegaan. :thumbup:
Bij ons ook alleen Intel (X25-M, 520-series, DC S3500/3700). Misschien dat er 3 uitvallen elk jaar, op een totaal van bijna 1000 stuks. Ook getest met andere merken (o.a. Samsung), maar daarbij hadden we of pech of ze zijn echt van mindere kwaliteit.
https://www.youtube.com/watch?v=__ebnRd3TEQ
testje van de jongens van hardware.info, levensduur van de ssd getest, conclusie: ze gingen niet allemaal op het zelfde moment kapot.
Ik betwijfel de betrouwbaarheid van dergelijke testjes. Bijvoorbeeld: Hoeveel SSD's van elk merk / type zijn er getest, kwamen deze SSD's uit dezelfde batch? Wat voor gedragspatroon is er getest, etc. Het kan ook nog zo zijn dat de firmware van merk X beter is, maar je dat pas na veel langer dan een paar maanden merkt.