PDA

Bekijk Volledige Versie : Help! Server werkt niet meer met 2e CPU



Erik H.
27/12/10, 20:22
Goedenavond,

Sinds vanmorgen doet 1 van onze ESX omgevingen het niet meer. Bij het opstarten brandt ALLEEN het power lampje.

Specs:
4 schijven in raid 10 (met raidcontroller uiteraard)
X8DTL-i moederboard
2x E5520 processors

Na onderzoek bleek dat als we CPU 2 verwijderden het systeem wel netjes opstartte. We hadden het vermoeden dat de socket op het moederboard defect was. Dus we hebben het moederboard vervangen met een splinternieuw exemplaar.

Dat gaf nog steeds hetzelfde probleem. Dus hebben we beide processors vervangen met splinternieuwe exemplaren op dat nieuwe moederboard. Zelfde probleem.

Vervolgens als laatste redmiddel de complete voeding vervangen door een identiek exemplaar. Zelfde probleem.

Werkelijk elk kabeltje en stekkertje is vervangen maar het probleem blijft simpelweg identiek. Hij start alleen op met 1 processor in CPU1.

Iemand een flauw idee of we hier iets over het hoofd zien??

wila
27/12/10, 20:48
Hmmm.... je hebt inderdaad de meest logische onderdelen vervangen.

Het kan nog steeds een defect geheugenmodule zijn?
Je vermeld niet welke versie van ESX je draait. Heb je ESX al een keer opnieuw geinstalleerd? Het is vreemd dat het niet zou booten door een software probleem, misschien niet heel erg waarschijnlijk, maar je hoeft natuurlijk maar ergens een corrupt bestand te hebben in je boot chain om het geheel tot een stop te brengen.
De licentie is wel voor dual CPU? (Zou bij mijn weten nog steeds moeten booten, maar je weet ooit nooit niet)
Dit is pas vanaf een reboot van de host?

In jullie geval zou ik waarschijnlijk ook eens een linux live CD proberen en te kijken ofdat die wel normaal boot.
--
Wil

Erik H.
27/12/10, 20:50
Hmmm.... je hebt inderdaad de meest logische onderdelen vervangen.

Het kan nog steeds een defect geheugenmodule zijn?
Je vermeld niet welke versie van ESX je draait. Heb je ESX al een keer opnieuw geinstalleerd? Het is vreemd dat het niet zou booten door een software probleem, misschien niet heel erg waarschijnlijk, maar je hoeft natuurlijk maar ergens een corrupt bestand te hebben in je boot chain om het geheel tot een stop te brengen.
De licentie is wel voor dual CPU? (Zou bij mijn weten nog steeds moeten booten, maar je weet ooit nooit niet)
Dit is pas vanaf een reboot van de host?

In jullie geval zou ik waarschijnlijk ook eens een linux live CD proberen en te kijken ofdat die wel normaal boot.
--
Wil

Alle geheugenmodules zijn stuk voor stuk nagelopen. Met een enkele en zelfs 0 modules is het probleem identiek. Hij start WEL gewoon op met 1 CPU dus dat sluit dat toch enigzins uit dat ESX het probleem zelf is?

wila
27/12/10, 21:02
ESX uitsluiten? Op het moment heb je juist het probleem dat je niet kan vinden waarom het niet werkt. Dus zou ik als ik jou was alle opties open houden en zeker een linux live CD proberen.

Het is vreemd, gebruik al jaren ESX, ben erg actief op de communities fora van vmware, maar ken je probleem niet. Het ruikt nog steeds erg veel naar een hardware probleem.

Is je BIOS firmware up to date?
Je zegt dat hij helemaal niks doet met 2 CPUs? Hij begint niet eens met booten?

Qua alle geheugen gecontroleerd, tja.. geheugen is wat dat betreft raar, je zou het eigenlijk 24 uur of langer moeten testen via memtest86 (zie bijna iedere linux bootable CD) maar ben geneigd om inderdaad te denken dat het niet het geheugen is als hij met 1 stick al problemen geeft en zeker als je die ook nog eens uitwisselt met een andere en nog steeds hetzelfde probleem hebt.
--
Wil

Geert-Jan
27/12/10, 21:07
Wat ik mis is of de 2 CPU's in de BIOS te zien zijn....?

Erik H.
27/12/10, 21:12
Wat ik mis is of de 2 CPU's in de BIOS te zien zijn....?

Met 2 CPU's kom je met GEEN mogelijkheid in de bios. Scherm blijft zwart. Ik kan dus ook niet opstarten vanaf cd met 2 CPU's...

In 10 jaar heb ik zoiets geks ook nog nooit gezien.

Ahmed
27/12/10, 21:24
Misschien stom maar is je voeding krachtig genoeg voor 2 CPU's? Doet hij het ook als je alleen de 2de CPU aansluit in de andere socket (dus niet de eerste die er al in zat)

Geert-Jan
27/12/10, 21:25
Ok, maar daarmee kun je de conclusie trekken dat het hardware matig zit, en niet verder.
Wat doet het met bordje, cpu en geheugen? Dus zonder Raid card en HDD, zo kaal mogelijk dus, evt. een default bios?

systemdeveloper
27/12/10, 21:45
check eens of je voltages van je procs wel goed staan ingesteld in het bios en dat ie niet teveel/te weinig trekt met 2 procs? Vaak kan een kleine afwijking al genoeg zijn om de boel dood te houden. Mogelijk kun je dit ook aan de ledjes op het bord zien.

Phu
27/12/10, 22:09
Mocht er een riser in zitten trek deze er eens uit.
En kijk of alles weer werkt

rensariens
27/12/10, 22:25
Heb dit ook ooit gehad. Check ook even goed of je moederbord nergens sluiting maakt / probeer een andere kast.

ichat
27/12/10, 23:10
opsomming
> check op een ander mobo of je cpu's matchen
> check of andere cpu's (die wel werken) op dit mobo werken
> check of je geen sluiting hebt,
> check of socket2 alleen ook werkt (sommige moederborden ondersteunen dit)

klinkt als een hardware probleem ergens tussen je cpu je socket en je bios

Erik H.
27/12/10, 23:55
- Voeding is geschikt voor deze setup (en is volledig vervangen vandaag)
- Er zit geen riser card in
- Socket 2 werkt NIET alleen (dus zonder cpu in socket 1)

Ik heb echt het idee dat we iets heel doms over het hoofd zien maar wat het is....

Phu
28/12/10, 00:01
Heb je geen andere cpus om de setup even de testen ?
dat het niet aan de 5520 zou liggen ?

systemdeveloper
28/12/10, 00:22
Bios wel up to date? Geen pinnetje van de 2de cpu verbogen?

Paul Z.
28/12/10, 01:05
Hmm...
Misschien dat je kast iets verbogen is nu en dat er ergens een sluiting met de kast wordt gemaakt? (Gewicht van de koeler misschien welke het moederbord naar beneden drukt?)

The-BosS
28/12/10, 01:18
Naast allemaal de andere adviezen kan ik enkel nog zeggen probeer het eens met een cmos clear, soms zijn de kleinste en domme dingen moeilijk te vinden in een bios. Maar een cmos clear heeft mij al heel wat ellende bespaard.

Wynand
28/12/10, 01:37
Is daar nog iets aan vooraf gegaan..? 'k Weet dat het een server is en je meestal gewoon vaststeld dat hij niet meer online is en ongetwijfeld een powercycle gedaan hebt, maar heb je enig idee wat de status was toen je begon met het swappen van hardware?
Zou hier eerder richting geheugen denken, dit is correct verdeeld over de 6 slots?
Test is wat hij zonder geheugen (en raidcontroller, niet nodig voor een diagnose) doet?

Phu
28/12/10, 01:51
Bios wel up to date? Geen pinnetje van de 2de cpu verbogen?

Volgens mijn hebben de 55xx series geen pinnetjes op de cpu meer

Wat anders nog een optie is het mobo en de rest niet in een chassis monteren
maar los testen, ivm mogelijke kortsluiting.

Anders de 8pin 12v (CPU voeding) eens nakijken of deze er goed in zit.

Wynand
28/12/10, 02:45
Is inderdaad goed mogelijk en logisch om daar aan te denken, maar vind het wat vreemd dat er fysiek niks aan dat ding verandert is waardoor het oorspronkelijke probleem ontstond..
Ondanks dat ze geen pinnetjes meer hebben kun je behoorlijk wat lol hebben met verbogen pinnetjes op de socket zelf, zo wel is een dagje zoet geweest met uit te zoeken wat er op 3 gloednieuwe Asus P6T's mis was, en op elk bord één(zelfde) pinnetje terug recht mogen duwen...

Als je nou een ander moederbord gestoken had dan hetzelfde, was het leuker geweest. :D

systemdeveloper
28/12/10, 10:26
Volgens mijn hebben de 55xx series geen pinnetjes op de cpu meer

Wat anders nog een optie is het mobo en de rest niet in een chassis monteren
maar los testen, ivm mogelijke kortsluiting.

Anders de 8pin 12v (CPU voeding) eens nakijken of deze er goed in zit.
My bad, had niet op cpu type gelet (heb er in het verleden alleen eens dagen naar lopen te zoek toen het bleek dat te zijn).
De 12v rail even doormeten is ook een goeie idd.
Een belletje richting leverancier helpt misschien ook nog wel. Misschien is het een bekend probleem?

Boyke
28/12/10, 13:38
Wij hebben zo'n zelfde probleem recent nog gehad, is toen opgelost door S3. Die hebben toen ook letterlijk alles vervangen en pas toen men de PSU vervangen had bleek het probleem verholpen te zijn.

Echter heb je deze al vervangen dus ik sluit me denk aan bij Rens, sluiting ergens met het chassis?

ichat
28/12/10, 13:52
ik herhaal het denk ik nog maar een keer,

> check voor sluiting (dus eventueel het bord uit je kast halen en op een nietgelijdende ondergrond leggen ...
> probeer uit te vinden of je met 2 andere cpu's (uit een werkende config) wel suc6 hebt.
> check je sockets of alles goed zit, geen gekke verbogen pins,
> check je bios versies etc en bel met je hardware leverancier.

persoonlijk zou ik nu deze volgorde aanhouden, gebruik voor de tests minimale config (dus geen addon kaarten die niet strikt noodzakelijk zijn ( minimale ram, geen raid kaarten etc)