Read-only file system

[snaaps]

Sinds ongeveer een half uur heb ik een groot probleem op de server.

bij het starten of herstarten van een aplicatie krijg ik de volgende melding:

[root@ccc5 ~]# service directadmin start
Starting DirectAdmin: [ OK ]
touch: cannot touch `/var/lock/subsys/directadmin': Read-only file system

dit geld ook voor exim, andere aplicaties durf ik niet te herstarten omdat ik bang ben dat deze vervolgens de zelfde meldingen gaan geven.

tevens gaat het uploaden ook niet meer naar de server
Krijgen de volgende error:
550 test.txt: Read-only file system

is er toevallig iemand die dit tegen betaling snel kan oplossen?

iemand bekend met dit probleem?

Ferdora core 3
Directadmin

[XF-RICK]

Origineel geplaatst door snaaps
Sinds ongeveer een half uur heb ik een groot probleem op de server.

bij het starten of herstarten van een aplicatie krijg ik de volgende melding:

[root@ccc5 ~]# service directadmin start
Starting DirectAdmin: [ OK ]
touch: cannot touch `/var/lock/subsys/directadmin': Read-only file system

dit geld ook voor exim, andere aplicaties durf ik niet te herstarten omdat ik bang ben dat deze vervolgens de zelfde meldingen gaan geven.

tevens gaat het uploaden ook niet meer naar de server
Krijgen de volgende error:
550 test.txt: Read-only file system

is er toevallig iemand die dit tegen betaling snel kan oplossen?

iemand bekend met dit probleem?

Ferdora core 3
Directadmin

Draai eens een smart-check, vaak zet de kernel op read-only als of het filesystem beschadigd is of de schijf aan het doodgaan is.

smartctl -H /dev/hda (of SDA) geloof ik uit mijn hoofd.

[snaaps]

[root@ccc5 ~]# smartctl -H /dev/sda
smartctl version 5.33 [i386-redhat-linux-gnu] Copyright (C) 2002-4 Bruce Allen
Home page is http://smartmontools.sourceforge.net/

SMART Health Status: OK

[Detonator]

Is het filesystem readonly gemount ('mount' uitvoeren en kijken naar de opties, als er 'ro' tussen staat dan is dat het geval)? Uitzoeken in syslog waardoor hij dusdanig is gemount, eventueel een fsck uitvoeren.. Vervolgens weer read-write mounten dmv. de optie '-o remount,rw' van het mount-commando.

[snaaps]

is er iemand die zou willen inloggen in het systeem?

Sorry maar hier heb ik dus geen kaas van gegeten
wordt vergoed!

[lifeforms]

Ik neem aan dat je het volgende al hebt geprobeerd:

df (om te kijken op welke device de /var partitie draait, bijv /dev/hdaX)
fsck /dev/hdaX (nummer heb je uit df)
mount -a

?

[snaaps]

systeem is momenteel totaal onbereikbaar.
tevens werken alle epc's niet meer (strange)
404 pagina op alle epc's

stroom is niet uitgevallen want alle andere servers draaien nog steeds.
ik ben morgenochtend in dc dus gaan we kijken wat er aan de hand is

[lifeforms]

Ai, dan houdt het op. Succes morgen dan maar.

[snaaps]

naar alle waarschijnlijkheid ben ik morgen (11-01-2006) rond 8:00 in dca.
Omdat ik het idee heb dat de hardisk naar de kl*te is zou ik graag iemand hebben die eventueel bereid is om morgen ochtend mij te assisteren betreft de harddisk vervangen en/of dat soort zaken.

lokatie: dca amsterdam
tel: 06 38633028 (vanaf 06:00 uur)

Uiteraard worden de uren vergoed.

[snaaps]

ok zokuist fsck uitgevoerd en deze heeft zeer veel error gefixt.
de server draaid in ieder geval weer, bellen is niet meer nodig.

[Capt.Pascal]

Hoi Snaaps,
ben blij dat je het probleem inmiddels zelf gevonden hebt.
Hoewel ik je kan adviseren niet meteen in paniek te raken, moet ik toegeven dat ik het met ruim 15 jaar UNIX ervaring ook heel warm krijg als een online bak onderuit gaat en ik de hete adem van mijn opperhoofd in mijn nek voel.
Zoek even uit of het probleem eenmalig is of welicht een stervende harddisk (thuis dat probleem snif snif)
Al eens overwogen een tweede gelijke disk in die ketel te zetten en die te copieren.
als de boel dan plat gaat ben je in 5 min weer terug in buisnes.

Ohhh en als je zelf niet de kennis in huis hebt,
zorg dat je voorbereid bent op dergelijke calamiteiten.
Telefoonlijstje is het minimum.
Net als zoveel anderen doe ik regelmatig remote beheer voor anderen,
en je zult zat lui vinden waarmee je dergelijke afspraken kunt maken.

Sucses.

[SystemZ]

Origineel geplaatst door Capt.Pascal
ook heel warm krijg als een online bak onderuit gaat en ik de hete adem van mijn opperhoofd in mijn nek voel.

Dit komt mij ook bekend voor

Maar snaaps. Ik zou toch voor de zekerheid direct een backup maken van je HDD want goed is het natuurlijk niet.

[snaaps]

het is al helemaal duidelijk hoe de problemen zijn onstaan.
door een uitgaande (mail) aanval (25Mbit) is de server op hol geslagen, veel mails kwamn terug en gingen door de spamfilter, dit veroorzaakten een serverload van 730, dit terwijl de server dus gewoon bereikbaar was.
Wellicht kun de hd alle informatie niet meer verwerken en bij een keiharde stop (killall) van diverse programma's is het wellicht goed verkeert gegaan op de hd.

De3 hd vertoont nu geen errors meer en het probleem lijkt hiermee opgelost.
uiteraard hebben wij een backup van de hd

[Capt.Pascal]

Kun je oplossen met quota's
maar ik heb laats een soortgelijk probleem gehad.
Een overvolle (nooit uitgelezen) mailbox nam zoveel geheugen in
dat zowel RAM als SWAP overliepen.
In zo'n geval word gekeken welk process het langst niet actief is.
Zodoende werd mijn SQLserver er steeds uit gedonderd, en de hele bak retetraag.
Gewoon die mailbox wissen (en de oorzaak van die mailtjes opheffen)
en het probleem was opgelost.

Systeembeheer is gewoon saai kutwerk,
en ik haat het ook echt.
Maar ja It's a dirty job but someone 's gottado it.
Laat mij maar lekker code kloppen,
dat ligt veel meer op mijn lijn.
Nu ja... en natuurlijk ouwehoeren he,
daar ben ik pas echt goed in