Onderwerp: Server problemen

hoi, ik hoop dat jullie mij hierbij kunnen helpen want ik heb het een beetje gehad.

had een dedicated in The United States, maar snelheid was zo verschrikkelijk slecht, moet zeggen heb ook redelijk zwaar script, dat een kennis mij het advies gaf om in Nederland te hosten.

Hij had klein hostingbedrijfje, dus ik een server gekocht met de volgende configuratie:

Chieftec 19 inch 2U Serverbehuizing ATX 360W Zwart
1 x GigaByte ATX Socket AM2 Sound,Gb-LAN,RAID,VGA,Fire
1 x AMD Athlon 64 X2 EE 4200+ Boxed,OPGA, Energy Effic
4 x D2 1GB 800-555 KHX6400D2
2 x Maxtor 320 GB SAT2 STM3320620AS

uiteindelijk moest hij door omstandigheden stoppen, en heb ik zijn 4 andere servers erbij overgenomen, inclusief klanten.

Nu merk ik de laatste tijd dat door enorme belangstelling aan een van mijn domeinen er een verschrikkelijke server load is ontstaan, die ervoor zorgt dat deze al 4 keer is gecrasht door overload.

de server zelf draait op Mandriva Linux release 2007.0 (Official) for x86_64
Ispconfig met Webmin.

niet mijn keuze moet ik zeggen, had liever uitsluitend cpanel gehad of DirectAdmin control panel op een ander os.

ik ben echt ten einde raad, want mijn bezoekeraantal is momenteel echt aan het exploderen, maar toch ook niet weer genoeg om een server te laten crashen.

Wie oh wie kan mij advies geven.

Meer cache geheugen, meer gb ram?

wil ook eventueel een andere betere server voor deze domein(en) bestellen, maar heb dan ook niet de benodigde kennis om er het juiste os syteem op te zetten.

moet ik de 4 andere servers clusteren, of loadbalancer software gebruiken?

ik weet het echt niet.

zijn andere servers btw draaien gewoon goed, maar daar staan niet zulke zware scriptjes op te draaien.

update:

heb zojuist een bod gedaan op deze:

HP DL380 G4 te koop, 3 jaar in datacenter gestaan
specs:
Dual Xeon 3,0 Ghz
8 Gig ECC DDR geheugen (8 x 1 GB)
6 x 36 GB 15K RPM harddisk
ILO licentie


staat natuurlijk geen os op

Zelf een OS erop zetten is niet zo moeilijk hoor. Je zou altijd een standaard install kunnen doen en daarna iemand kunnen vragen om de boel goed te installeren / in te stellen enz.

Als je er zelf geen, of niet voldoende verstand van hebt kun je beter iemand inhuren. Ook voor een eventuele server check. Aan de hand daarvan zou die persoon een voorstel kunnen doen en kun je beslissen wat je wilt.

Zeker SCSI ook nog, he?

Je kunt beter even duidelijk krijgen waar de bottleneck precies zit. Sommige dingen kun je niet lang oplossen met heavier hardware. Stel dat je ergens gewoon een index op een tabel hebt vergeten die explosief groeit of zo? Dan heb je volgende maand weer een nieuwe server nodig. Met wat standaard tools zoals top, mytop, iftop, gstat, free etc. kun je al snel zien wat het probleem is en hoef je niet paniekerig aan symptoombestrijding te doen
Denk eraan dat de kans ook groot is dat de huidige server gewoon een standaard installatie is en misschien wel helemaal niet getuned is voor veel bezoekers.

Heb je al eens in de gaten gehouden wat de load precies doet op de server?

je zegt dat je een redelijk zwaar script hebt.. is dit te splitsen in kleinere scripts? Vaak wil dit de multicore cpu ten goede komen en anders het cachen van de webserver en browser wel.

Ik ben software engineer en vanuit mijn hoek gezien zou ik eens iemand naar de performance problemen laten kijken van het script.

Met andere woorden, eens meten welk deel van het script alle tijd opslokt.

Je hebt best kans dat als je 1 of 2 bottlenecks oplost, het script als een zonnetje draait.

gewoon iemand met ervaring naar laten kijken; meestal zit het probleem in een klein hoekje.

Disk Usage: / 37% (3.3G), /boot 4% (16M), /home 14% (1.9G), /tmp 2% (18M), /var 25% (64G)

dit heb ik nu.


Gemiddelde belasting 2.28 2.31 2.70


ik hou me aanbevolen voor advies.
zelf denk ik dat de mailqueue flush het probleem is, met 60.000 emails flushen gaat ie gewoon plat.
maar dat is maar speculatie.

moet gewoon een oplossing voor komen.

misschien hardware aanpassen, of een MySQL server apart.

doe me maar voorstel voor upgrade, controle etc.

momenteel 1500+ leden,10.000 veilingen, en komt een nieuwe layout met nieuwe uitgebreide functies aan.
plaatjes moeten 1 voor 1 laden, en als je bijvoorbeeld bij yezzz.be kijkt, die staan er zo, dus cachegeheugen is sowieso te klein.

verder heb ik nog een productvergelijker, deze wil ik echt laten knallen, net als kelkoo maar niet op deze manier, zo traag als ....

Oorspronkelijk geplaatst door sante140

zelf denk ik dat de mailqueue flush het probleem is, met 60.000 emails flushen gaat ie gewoon plat.

Lijkt me wat aan de hoge kant.
60k e-mails in de queue voor 1500 leden?

De maximal_queue_lifetime al wat lager gezet in je Postfix main.cf?

ja natuurlijk, ook al cron aangemaakt om deze na 15 min te verwijderen.

Oorspronkelijk geplaatst door sante140

ja natuurlijk, ook al cron aangemaakt om deze na 15 min te verwijderen.

Dan is het me niet helemaal duidelijk hoe je aan 60k berichten komt.


Verder is 15 min. het andere uiterste.
Kans is aanwezig dat de e-mail dan niet afgeleverd wordt bij providers die greylisting gebruiken.

deze cijfers waren voor de cronjob, nadat server opnieuw down was heb ik die aangemaakt.

ok, zal deze dan maar even verhogen dan.

done


ik heb hier een bewuste log van de server shutting down

HTML Code:

Fri Aug 15 12:30:10 2008] [error] [client 72.14.199.65] File does not exist: /var/www/sharedip/rss.php
[Fri Aug 15 13:31:27 2008] [error] [client 88.131.106.10] File does not exist: /var/www/sharedip/robots.txt
[Fri Aug 15 13:31:27 2008] [error] [client 88.131.106.10] File does not exist: /var/www/sharedip/index.php
[Fri Aug 15 14:25:07 2008] [notice] suEXEC mechanism enabled (wrapper: /usr/sbin/suexec)
[Fri Aug 15 14:25:07 2008] [notice] Digest: generating secret for digest authentication ...
[Fri Aug 15 14:25:07 2008] [notice] Digest: done
[Fri Aug 15 14:25:08 2008] [notice] FastCGI: process manager initialized (pid 3315)
[Fri Aug 15 14:25:09 2008] [notice] Apache/2.2.4 (Mandriva Linux/PREFORK-6.4mdv2007.1) mod_fastcgi/mod_fastcgi-SNAP-0404142202 PHP/5.2.4 mod_ssl/2.2.4 OpenSSL/0.9.8e mod_perl/2.0.3 Perl/v5.8.8 configured -- resuming normal operations
[Fri Aug 15 14:29:08 2008] [notice] caught SIGTERM, shutting down
[Fri Aug 15 14:29:14 2008] [notice] suEXEC mechanism enabled (wrapper: /usr/sbin/suexec)
[Fri Aug 15 14:29:14 2008] [notice] Digest: generating secret for digest authentication ...
[Fri Aug 15 14:29:14 2008] [notice] Digest: done
[Fri Aug 15 14:29:15 2008] [notice] FastCGI: process manager initialized (pid 5338)
[Fri Aug 15 14:29:15 2008] [notice] Apache/2.2.4 (Mandriva Linux/PREFORK-6.4mdv2007.1) mod_fastcgi/mod_fastcgi-SNAP-0404142202 PHP/5.2.4 mod_ssl/2.2.4 OpenSSL/0.9.8e mod_perl/2.0.3 Perl/v5.8.8 configured -- resuming normal operations
[Fri Aug 15 14:31:30 2008] [notice] caught SIGTERM, shutting down
[Fri Aug 15 14:31:33 2008] [notice] suEXEC mechanism enabled (wrapper: /usr/sbin/suexec)
[Fri Aug 15 14:31:33 2008] [notice] Digest: generating secret for digest authentication ...
[Fri Aug 15 14:31:33 2008] [notice] Digest: done
[Fri Aug 15 14:31:34 2008] [notice] FastCGI: process manager initialized (pid 6089)
[Fri Aug 15 14:31:34 2008] [notice] Apache/2.2.4 (Mandriva Linux/PREFORK-6.4mdv2007.1) mod_fastcgi/mod_fastcgi-SNAP-0404142202 PHP/5.2.4 mod_ssl/2.2.4 OpenSSL/0.9.8e mod_perl/2.0.3 Perl/v5.8.8 configured -- resuming normal operations
[Fri Aug 15 14:43:47 2008] [error] [client 84.19.178.79] File does not exist: /var/www/sharedip/forum, referer: http://forum.vindplaats.eu/forum/index.php
[Fri Aug 15 14:43:47 2008] [error] [client 84.19.178.79] File does not exist: /var/www/sharedip/phpbb, referer: http://forum.vindplaats.eu/phpbb/index.php
[Fri Aug 15 14:43:47 2008] [error] [client 84.19.178.79] File does not exist: /var/www/sharedip/phpbb2, referer: http://forum.vindplaats.eu/phpbb2/index.php
[Fri Aug 15 14:43:47 2008] [error] [client 84.19.178.79] File does not exist: /var/www/sharedip/forums, referer: http://forum.vindplaats.eu/forums/index.php
[Fri Aug 15 14:43:47 2008] [error] [client 84.19.178.79] File does not exist: /var/www/sharedip/board, referer: http://forum.vindplaats.eu/board/index.php

Als je serverload hoog is, met welk proces is-ie dan bezig? Paste eens de output van top.

En wat is de output van vmstat? Staat 'ie op de schijf te wachten? Of is het puur CPU?

ehhhhwaar kan ik dat vinden?

heb wel vpsinfo en phpsysinfo en natuurlijk kan ik ook de de webmin stats bekijken

cpu
mysql 46.0 % /usr/sbin/mysqld --no-defaults --datadir=/var/lib/mysql --socket=/var/lib/mysql/ ...
Real memory: 3.80 GB total / 1.35 GB free Swap space: 996.18 MB total / 996.03 MB free

update:

vmstat
procs -----------memory---------- ---swap-- -----io---- -system-- ----cpu----
r b swpd free buff cache si so bi bo in cs us sy id wa
0 1 156 130524 704240 595500 0 0 71 1032 101 82 18 17 60 5

Location SCSI device A
Drive size 298.09 GB
Make and model ATA ST3320620AS
Supports SMART? Yes
SMART enabled? Yes
Errors logged 126 errors detected
Passed drive check? Yes

Tegenwoordig zijn er bedrijven die voor een beperkt bedrag per maand het serverbeheer voor je doen. Dit is vaak zelfs inclusief het optimaliseren van je OS.

Indien je PHP scripting goed is, zal alles dan gewoon goed draaien en krijg je degelijk advies bij problemen, waar de bottleneck zit.