PDA

Bekijk Volledige Versie : Hoge uitval WD Velociraptor disks



Wido
12/02/09, 23:35
Hallo,

Ik voelde mezelf altijd gezegend, uitval van disks kwam minimaal voor. In de tijd dat Maxtor werd gezien als het merk waar je falende disks had, ontsprong ik de dans met mijn Maxtors.

Echter lijkt het er nu op dat er een kwelgeest in het DC aanwezig is..

Om op het punt te komen, wij merken een gigantische uitval van WD Velociraptor disks in onze systemen.

Inmiddels hebben we er rond de 40 in gebruik, maar daarvan hebben er in 3 weken tijd al 8 gefaald, gewoon kapot, niets meer mee te doen.

Het gaat hier om zowel de 150GB en 300GB versies. Onze leverancier (TWP) zegt dat wij de enige zijn die er mee terug komen.

De temperaturen van de disks zijn niet hoog, dit wisselt tussen de 22 tot 27 graden.

De disks komen ook niet uit één serie, althans de serienummers lopen ver uit elkaar.

Daarom mijn vraag aan jullie, merken jullie ook een grote uitval van deze disks?

oehTie
13/02/09, 10:05
ik gebruik WD en samsung.... geen problemen mee....temperaturen lopen echter tussen 25 en 30 graden. iets hoger dus.

Paulewk
13/02/09, 10:49
Google verteld er weinig over, terwijl wanneer er hoge uitval van een type disk is hier meestal veel over te vinden is (zoek maar eens op samsung spinpoint).

Misschien een conflict met de controller waar je ze aan hangt?

En kapot / niets meer mee te doen, is dat een smart failure, of herkent het systeem hem gewoon niet meer?

Wido
13/02/09, 10:53
Google verteld er weinig over, terwijl wanneer er hoge uitval van een type disk is hier meestal veel over te vinden is (zoek maar eens op samsung spinpoint).

Misschien een conflict met de controller waar je ze aan hangt?

En kapot / niets meer mee te doen, is dat een smart failure, of herkent het systeem hem gewoon niet meer?Hangen allemaal aan verschillende Areca controllers, maar de disks werken ook gewoon niet meer in een desktop.

Bij het aanmaken van een filesystem krijg je al gelijk errors in je dmesg en uiteindelijk loopt de boel gewoon vast.

t.bloo
13/02/09, 10:56
er zijn meer mensen met hoge uitval

http://forums.storagereview.net/index.php?showtopic=27303

Wido
13/02/09, 11:02
er zijn meer mensen met hoge uitval

http://forums.storagereview.net/index.php?showtopic=27303Tnx! Dat is dus ongeveer het zelfde waar ik mee zit. Ik zal dat ook eens doorsturen aan onze leverancier.

Apoc
13/02/09, 11:51
De disks komen ook niet uit één serie, althans de serienummers lopen ver uit elkaar.

Komen ze toevallig wel uit dezelfde zending? Wellicht dat er tijdens het transport wat verkeerd is gegaan (dat heb ik al meerdere keren meegemaakt).

Stewie
13/02/09, 12:12
Kan het niet ook aan het chassis liggen? Wij hebben 4 jaar terug korte tijd op SuperMicro gedraaid op 1 specifiek chassis en daar hadden we ook zo'n hoge uitval percentages.

Ahead-IT
13/02/09, 12:31
De grootste uitval van harde schijven wordt veroorzaakt door trillingen in een server, niet door temperatuur. Misschien eens iets om na te kijken.

Hier geen problemen met de Velociraptors.

Jefke
13/02/09, 12:37
Of misschien te hard geroepen in het datacenter:
http://www.youtube.com/watch?v=tDacjrSCeq4

;-)

Wido
13/02/09, 12:44
Kan het niet ook aan het chassis liggen? Wij hebben 4 jaar terug korte tijd op SuperMicro gedraaid op 1 specifiek chassis en daar hadden we ook zo'n hoge uitval percentages.Nee, ze zitten in verschillende chassis. 1U, 2U en 3U. De ene setup draaien we RAID-10, de ander RAID-5 en zelfs RAID-50.

Ook komen de disks niet uit de zelfde levering danwel zending.

Randy
13/02/09, 12:52
Triling lijkt me geen probleem. De Velo zit toch in een 3,5 -> 2,5" 'converter'?

Wido
13/02/09, 12:56
Triling lijkt me geen probleem. De Velo zit toch in een 3,5 -> 2,5" 'converter'?Klopt, zit idd in een extra behuizing.

Trillingen zijn er ook niet, alles staat netjes in het Tele2 Gyrocenter te Amsterdam. Het rare is dat we hier op kantoor ook enkele Velo's hebben draaien (RAID-0 zelfs ;) ) en daar is niets aan te merken.

gjtje
13/02/09, 13:18
Zitten er nog andere disks in die behuizingen? Mixen van verschillende RPM's in één behuizing gaat niet zo goed.

Paulewk
13/02/09, 13:41
Zitten er nog andere disks in die behuizingen? Mixen van verschillende RPM's in één behuizing gaat niet zo goed.

Dat gaat perfect hoor, heb dat hier 100e keren draaien.

Wido
13/02/09, 13:50
Zitten er nog andere disks in die behuizingen? Mixen van verschillende RPM's in één behuizing gaat niet zo goed.Heb dat al vaker gedaan en gaat prima? Maar nee, in dit geval zitten er alleen WD Velo's in die systemen.

Ze zitten er met 4, 8 of 16 stuks in.

Het aparte is, wanneer we er 4 in RAID-10 hebben draaien falen altijd precies de juist twee disks zodat we een stripe over houden, dat is nu al 3 keer gebeurd..

Dus je zou zeggen, RAID controller issue, maar nee, de disk is echt dood.

Ingvald
13/02/09, 14:10
Heb een tijdje ook hetzelfde gehad. Supermicro icm met Areca en Raptor 150GB. Allemaal 1 voor 1 doodgegaan. Gelukkig ook nooit geen kapotte array gehad.

Wido
13/02/09, 14:13
Heb een tijdje ook hetzelfde gehad. Supermicro icm met Areca en Raptor 150GB. Allemaal 1 voor 1 doodgegaan. Gelukkig ook nooit geen kapotte array gehad.Waren dit de Velo's of de oudere 150GB'ers? (3.5"?)

hrodenburg
13/02/09, 14:21
Heb een tijdje ook hetzelfde gehad. Supermicro icm met Areca en Raptor 150GB. Allemaal 1 voor 1 doodgegaan. Gelukkig ook nooit geen kapotte array gehad.

En toen? Of is er na het vervangen nooit meer 1 stuk gegaan?

Apoc
13/02/09, 15:14
Heb dat al vaker gedaan en gaat prima? Maar nee, in dit geval zitten er alleen WD Velo's in die systemen.

Ze zitten er met 4, 8 of 16 stuks in.

Het aparte is, wanneer we er 4 in RAID-10 hebben draaien falen altijd precies de juist twee disks zodat we een stripe over houden, dat is nu al 3 keer gebeurd..

Dus je zou zeggen, RAID controller issue, maar nee, de disk is echt dood.

Ik hoorde van Rosco al zoiets.

Je zei eerder dat er geen trillingen zijn, maar daar zou ik niet te snel vanuit gaan. Hou er rekening mee dat de schijven zelf altijd trillingen veroorzaken, door de rotatie.

Ik ga er van uit dat de schijven in brackets zitten. Wellicht dat deze schijven niet helemaal 100% goed passen op de een of andere manier, waardoor de brackets als geheel gaan trillen, of iets dergelijks. Lijkt me vrij onwaarschijnlijk, maar bij een dergelijke hoge uitval zou je toch naar soortgelijke oorzaken opzoek moeten gaan.

Wat je natuurlijk zou kunnen proberen is om een heel ander chassis (bij voorkeur van een ander merk) kunnen proberen, en dan bekijken of het dan nog gebeurt.

Wij draaien overigens ook aardig wat Raptors en er is er letterlijk nog nooit een uitgevallen. Sommige daarvan draaien al jaren.

Ingvald
13/02/09, 16:07
Waren dit de Velo's of de oudere 150GB'ers? (3.5"?)
Dat waren gewoon 3,5 inch

En toen? Of is er na het vervangen nooit meer 1 stuk gegaan?
Nadat ze allemaal vervangen zijn geweest geen problemen meer.

Lite-On
13/02/09, 17:23
Wellicht een voeding met instabiele voltages?
Regelmatig gelezen dat hardeschijven naar niet zo blij mee zijn.
Met server hardware zou ik er niet zo snel vanuit gaan, maar het zou zomaar kunnen.....

Desmond
14/02/09, 14:13
Sowieso heb ik veel problemen met WD. Toen wij 2 jaartjes terug gingen verhuizen hebben we alles nieuw gekocht voor onze eigen websites, 75 servers, gemiddeld 3 disken per server. Destijds gebruikte ik Maxtor schijven (SATA + IDE) en had natuurlijk wel eens een kapotte disk maar 1 a 2 per 6 maanden, maximaal.

De partij die ons 75 servers verkocht (SuperMicro met 3Ware) raadde ons absoluut WD aan want Maxtor was erg dramatisch. Wij op het advies ingegaan en maand 1 hebben wij van de 225 disken er 17 mogen wisselen. Maand 2 nog een stuk 9 en nu maandelijks wel 1 a 2 disken. Het kan natuurlijk aan de vracht liggen die je koopt maar voor de defecte disks stoppen wij er weer keurig Maxtor diskjes in :)

WeServIT
16/02/09, 18:37
Wij hebben verschillende merken harde-schijven gehad, het bleek toch wel dat de Samsung schijven het best zijn. We hebben Hitatchi gehad, die zijn allemaal kapot gegaan. Western Digital hebben wij ook niet zo'n goede ervaringen mee.

cj0
17/02/09, 00:48
Western Digital, Maxtor en Hitachi schijven hebben het hier nog niet af laten weten. Wel Seagate SCSI disks, maar die waren dan ook 10 jaar oud, en dan kan/mag het een keer gebeuren.

Spyder01
17/02/09, 00:48
Volgens mij wisselt het nogal.

Heb al eens een tijdje problemen gehad met Maxtor, al eens een periode met Seagate, Hitachi... Dus ja.

Ik heb het idee dat het gewoon elke keer een batch uit een bepaalde periode is en dat je dus wanneer je ze uit weer een compleet andere batch krijgt, dat deze wel weer goed zijn.

Ach ja, allemaal giswerk. De een heeft daar problemen mee, weer een ander met dat merk en zo blijf je bezig. Er blijven dan weinig schijven over, waarmee je zou kunnen draaien.

Serveo
17/02/09, 12:34
Kan het niet ook aan het chassis liggen? Wij hebben 4 jaar terug korte tijd op SuperMicro gedraaid op 1 specifiek chassis en daar hadden we ook zo'n hoge uitval percentages.

Welke chassis was dat? Overigens hebben wij ook vaak uitval met WD disks.

Wido
18/02/09, 16:18
Inmiddels heb ik mijn disks (8 stuks) terug van WD, gerepareerd en al, ze zijn niet vervangen zo ver ik kan zien.

Het is even afkloppen, want ik heb sinds de laatste uitval (1.5 week terug) niets meer gehad.

Wido
25/02/09, 10:42
En dat mocht niet baten:


Date-Time Device Event Type
================================================== =============================
2009-02-25 10:36:06 Enc#1 Slot#3 Time Out Error
2009-02-25 10:35:45 Enc#1 Slot#5 Reading Error
2009-02-25 10:35:44 Enc#1 Slot#5 Reading Error
2009-02-25 10:35:44 Enc#1 Slot#5 Reading Error
2009-02-25 10:35:43 Enc#1 Slot#5 Reading Error
2009-02-25 10:35:36 Enc#1 Slot#1 Device Failed
2009-02-25 10:35:35 Raid Set # 000 RaidSet Degraded
2009-02-25 10:35:35 Enc#1 Slot#8 Device Failed
2009-02-25 10:35:35 Raid Set # 000 RaidSet Degraded
2009-02-25 10:35:33 ARC-1222-VOL#000 Volume Degraded
2009-02-25 10:35:33 Enc#1 Slot#1 Writing Error
2009-02-25 10:35:33 ARC-1222-VOL#000 Volume Degraded
2009-02-25 10:35:33 Enc#1 Slot#8 Writing Error
================================================== =============================
GuiErrMsg<0x00>: Success.

Er gaan dus twee disks tegelijk dood, wat ik al héél apart vindt, maar ook beginnen de andere disks gelijk errors te geven.

Gelukkig weer een RAID-10 set, maar hier wordt je toch echt niet blij van.

Stewie
25/02/09, 12:36
En dat mocht niet baten:



Er gaan dus twee disks tegelijk dood, wat ik al héél apart vindt, maar ook beginnen de andere disks gelijk errors te geven.

Gelukkig weer een RAID-10 set, maar hier wordt je toch echt niet blij van.
2 tegelijk: dan krijg ik sterk de indruk dat het niet de hard disks zijn maar een ander component in de server danwel de combinatie daarvan met de hdd.

Ahead-IT
25/02/09, 13:04
Welke firmware draai je op de Areca?

Wido
25/02/09, 13:08
Welke firmware draai je op de Areca?1.45, al zie ik dat de 1.46 inmiddels uit is voor de ARC-1222 dus ga daar ook naar upgraden.

Ahead-IT
25/02/09, 13:11
Goed idee. Note: als je upgrade, alle firmware bestanden (zijn er meerdere) eerst uploaden naar de controller en dan pas de server een reboot geven.

Wido
05/03/09, 11:56
In de tussentijd heb ik al weer 5 overleden disks gehad, maar er is een lichtpuntje.

Ik heb samen met TWP contact gehad met WD en diverse logs doorgestuurd naar WD. Volgens WD is het een firmware probleem en er wordt gewerkt aan een nieuwe firmware die het probleem oplost.

Wordt nog een leuk werkje zo veel disks flashen :)

Paulewk
05/03/09, 12:29
In de tussentijd heb ik al weer 5 overleden disks gehad, maar er is een lichtpuntje.

Ik heb samen met TWP contact gehad met WD en diverse logs doorgestuurd naar WD. Volgens WD is het een firmware probleem en er wordt gewerkt aan een nieuwe firmware die het probleem oplost.

Wordt nog een leuk werkje zo veel disks flashen :)

Misschien offtopic:
Ik weet niet hoeveel het er zijn, maar dat laat je hun toch doen? Hun leveren spullen die niet werken.

Wido
05/03/09, 12:57
Misschien offtopic:
Ik weet niet hoeveel het er zijn, maar dat laat je hun toch doen? Hun leveren spullen die niet werken.+/- 45 disks, dat is het probleem niet, maar wel dat de servers down moeten..

Wido
16/04/09, 12:28
Nou, de firmware fix heeft niet mogen baten.

Vanmorgen vielen er in een RAID-10 set van 8 disks ineens 2 disks uit en ging tijdens het rebuilden nog een derde disk er aan.

Voor mij is het klaar met de WD raptor serie, die gaan allemaal terug (stuk of 45 in totaal).

Mijn advies: Neem geen WD Velociraptors

Domenico
16/04/09, 12:34
Nou, de firmware fix heeft niet mogen baten.

Vanmorgen vielen er in een RAID-10 set van 8 disks ineens 2 disks uit en ging tijdens het rebuilden nog een derde disk er aan.

Voor mij is het klaar met de WD raptor serie, die gaan allemaal terug (stuk of 45 in totaal).

Mijn advies: Neem geen WD Velociraptors

Erg lullig voor je/jullie! Heb zelf geen enkele last met deze hd's dus misschien toch disks uit een foute batch ofzo...

Wido
16/04/09, 12:43
Erg lullig voor je/jullie! Heb zelf geen enkele last met deze hd's dus misschien toch disks uit een foute batch ofzo...Dat zou kunnen, maar de disks zijn niet op het zelfde moment besteld en ook de serienummers lopen ver uit een.

Maar ik weet niet hoe de productie is gegaan bij WD, dat kunnen zij alleen achterhalen.

Lite-On
16/04/09, 12:46
3 disk naar de gort... niet bepaald fijn.
Ik hou het maar mooi op Samsung SATA disks een SSD's :)

VinceSTM
16/04/09, 13:14
Nou, de firmware fix heeft niet mogen baten.

Vanmorgen vielen er in een RAID-10 set van 8 disks ineens 2 disks uit en ging tijdens het rebuilden nog een derde disk er aan.

Voor mij is het klaar met de WD raptor serie, die gaan allemaal terug (stuk of 45 in totaal).

Mijn advies: Neem geen WD Velociraptors

Als jij zegt dat ze tegelijkertijd uitvielen, ligt het dan niet toevallig aan je raidcontrollers ofzo?

dreamhost_nl
16/04/09, 13:22
Speelt dit probleem alleen bij je Areca controller en indien ja, alleen maar bij één type?

cyrano
16/04/09, 13:40
Klopt, zit idd in een extra behuizing.

Trillingen zijn er ook niet, alles staat netjes in het Tele2 Gyrocenter te Amsterdam. Het rare is dat we hier op kantoor ook enkele Velo's hebben draaien (RAID-0 zelfs ;) ) en daar is niets aan te merken.

Je monitort temperatuur en hebt daar al naar gekeken, veronderstel ik.

Dan blijft eigenlijk alleen trilling over als oorzaak. Dat de servers in een DC hangen, voorkomt geen trillingen. Je kan te maken hebben met toevallige resonanties.

Je zou kunnen een acceleratie opnemer op één van de disks plakken en die aansluiten op de ingang van een temp sensor. Dat geeft dan na enkele dagen/weken een zicht op de trillingen.

Deze (http://www.futurlec.com/Acceleration_Sensor.shtml), bv.

Wido
16/04/09, 13:57
Speelt dit probleem alleen bij je Areca controller en indien ja, alleen maar bij één type?Nee, zowel bij de ARC-1212, ARC-1222 en de ARC-1220.

Maar de disks zijn ook echt dood daarna, ze maken rare geluiden en zijn in een desktop bijv ook niet meer te gebruiken.

Het lijkt echt op een hardware matig falen.

Maar het gebeurd alleen bij de raptors, in de zelfde kasten hangen ook machines met gewoon 7200RPM disks, niets mee aan de hand.