Onderwerp: bw.pl

top:
23448 root 25 0 37652 33m 1728 R 31.9 1.6 4:43.99 bw.pl
19119 root 25 0 46812 41m 1756 R 30.6 2.1 40:28.75 bw.pl
24642 root 25 0 45576 41m 1756 R 29.9 2.1 21:52.50 bw.pl

bw.pl meet het bandwith verbruik van websites op de server, het is een onderdeel van webmin/virtualmin.
Maar deze draait nu bijna constant en verbruikt in totaal gemakkelijk 90% v/d CPU...
Onze load is hierdoor enorm veel hoger dan zou mogen.
Hoe komt dit en hoe kan ik het verhelpen?
Onze server host een 50-tal websites en verbruikt slechts 30GIG traffiek in totaal.
Zo zwaar kunnen die bandwith logs toch niet zijn???

just 1 way to find out.. even kijken op de plek waar bij de logs dumpt en eens kijken wat er precies in komt... waarom moet het proces 3x draaien eigelijk :/

De access logs komen gewoon in /home/*user*/logs
Ik heb ook geen flauw idee waarom hij 3x draait, vroeger was dit maar 1x voor ongeveer 10 minuten dat hij dan draaide aan 98% CPU gebruik...

De access_log van onze druk bezochtste site:
[root@server~]# du /home/scripts/logs/access_log
164376 /home/scripts/logs/access_log

In het bestand zie ik wel dingen staan als
80.200.80.61 - - [17/Mar/2006:19:41:49 +0100] "GET / HTTP/1.1" 403 2192
80.200.80.61 - - [17/Mar/2006:19:41:51 +0100] "GET / HTTP/1.1" 403 2192
80.200.80.61 - - [17/Mar/2006:22:08:36 +0100] "GET / HTTP/1.1" 200 1395
80.200.80.61 - - [17/Mar/2006:22:13:07 +0100] "GET / HTTP/1.1" 200 1395
80.200.80.61 - - [17/Mar/2006:22:13:09 +0100] "GET / HTTP/1.1" 200 1395
80.200.80.61 - - [17/Mar/2006:22:13:10 +0100] "GET / HTTP/1.1" 200 1395
80.200.80.61 - - [17/Mar/2006:22:14:56 +0100] "GET / HTTP/1.1" 200 1395
80.200.80.61 - - [17/Mar/2006:22:14:57 +0100] "GET / HTTP/1.1" 200 1395
80.200.80.61 - - [17/Mar/2006:22:14:58 +0100] "GET / HTTP/1.1" 200 1395
80.200.80.61 - - [17/Mar/2006:22:15:58 +0100] "GET / HTTP/1.1" 200 1397

Had dit al niet lang geroteerd ofzo moeten zijn?


In crontabs staat:
/etc/webmin/bandwidth/rotate.pl en het wordt gedraaid op de minuten geselecteerd: 0
verder staat de rest van tijd op alle.

Als ik de cron manueel uitvoer krijg ik:
Uitvoer van opdracht /etc/webmin/bandwidth/rotate.pl ..

Failed to run /usr/libexec/webmin/bandwidth/rotate.pl : No such file or directory at /etc/webmin/bandwidth/rotate.pl line 10.

Als ik dan verderzoek:
[root@server~]# locate *rotate.pl
/etc/webmin/bandwidth/rotate.pl
/usr/libexec/webmin/virtual-server/feature-logrotate.pl

In die rotate.pl staat:
#!/usr/bin/perl
open(CONF, "/etc/webmin/miniserv.conf");
while(<CONF>) {
$root = $1 if (/^root=(.*)/);
}
close(CONF);
$ENV{'WEBMIN_CONFIG'} = "/etc/webmin";
$ENV{'WEBMIN_VAR'} = "/var/webmin";
chdir("$root/bandwidth");
exec("$root/bandwidth/rotate.pl", @ARGV) || die "Failed to run $root/bandwidth/rotate.pl : $!";


Zien jullie de fout? Lijkt me iets doms kleins, maar is wel mega lastig momenteel.

hmmm, worden de user logs uberhaupt wel gerotate ? iig, 160MB is wel veel voor een logfile, dus ff die log renamen, dan een nieuwe touchen en je bw.pl weer starten. mss helpt dat een beetje.

Wat zegt syslog eigelijk ?

Nzyme: vorige post ge-edit, lees terug ff.
[root@server~]# locate *syslog*
/root/install.log.syslog
/root/upgrade.log.syslog

Sorry :-$, dit komt zooooo noobish over, maar aub, help me desondanks.

lol

Failed to run /usr/libexec/webmin/bandwidth/rotate.pl : No such file or directory at /etc/webmin/bandwidth/rotate.pl line 10.

ok, rotate.pl kan dus niet vanaf die locatie uitgevoerd worden

[root@server~]# locate *rotate.pl
/etc/webmin/bandwidth/rotate.pl
/usr/libexec/webmin/virtual-server/feature-logrotate.pl

en dat kan goed kloppen want hij bestaat ook niet op die locatie
mss even een symlink proberen...

edit:
nog dikkere lol, volgens mij vergis ik me :x

ik bedoel trouwens een 'cat /var/log/syslog'.

post de output van: /usr/sbin/lsof|grep 24642 hier eens. De eerste 20 regels is voldoende.

[root@server~]# cat /var/log/syslog
cat: /var/log/syslog: Onbekend bestand of map
=> dit bedoelde ik dus...

Andere pid genomen, want 24642 heeft zichzelf beeindigd en een nieuwe bw.pl gestart...

[root@server ~]# /usr/sbin/lsof|grep 23448
bw.pl 23448 root cwd DIR 22,2 4096 460081 /usr/li
bexec/webmin/virtual-server
bw.pl 23448 root rtd DIR 22,2 4096 2 /
bw.pl 23448 root txt REG 22,2 12548 344831 /usr/bi
n/perl
bw.pl 23448 root mem REG 22,2 1260104 1393236 /usr/li
b/perl5/5.8.5/i386-linux-thread-multi/CORE/libperl.so
bw.pl 23448 root mem REG 22,2 95444 2637924 /lib/li
bnsl-2.3.4.so
bw.pl 23448 root mem REG 22,2 26844 2637912 /lib/li
bcrypt-2.3.4.so
bw.pl 23448 root mem REG 22,2 14216 2638060 /lib/li
butil-2.3.4.so
bw.pl 23448 root mem REG 22,2 1521908 540674 /lib/tl
s/libc-2.3.4.so
bw.pl 23448 root mem REG 22,2 212168 540676 /lib/tl
s/libm-2.3.4.so
bw.pl 23448 root mem REG 22,2 21164 1394475 /usr/li
b/perl5/5.8.5/i386-linux-thread-multi/auto/Socket/Socket.so
bw.pl 23448 root mem REG 22,2 111052 2637832 /lib/ld
-2.3.4.so
bw.pl 23448 root mem REG 22,2 15100 2637918 /lib/li
bdl-2.3.4.so
bw.pl 23448 root mem REG 22,2 13192 1393370 /usr/li
b/perl5/5.8.5/i386-linux-thread-multi/auto/Digest/MD5/MD5.so
bw.pl 23448 root mem REG 22,2 18348 1394470 /usr/li
b/perl5/5.8.5/i386-linux-thread-multi/auto/File/Glob/Glob.so
bw.pl 23448 root mem REG 22,2 105976 540716 /lib/tl
s/libpthread-2.3.4.so
bw.pl 23448 root mem REG 22,2 79440 2637956 /lib/li
bresolv-2.3.4.so
bw.pl 23448 root 0r FIFO 0,7 87669705 pipe
bw.pl 23448 root 1w FIFO 0,7 87669706 pipe
bw.pl 23448 root 2w FIFO 0,7 87669706 pipe
bw.pl 23448 root 3r REG 22,2 49754537 1146980 /var/lo
g/xferlog
bw.pl 23448 root 5w FIFO 0,7 87670530 pipe
bw.pl 23448 root 8r FIFO 0,7 87670532 pipe

hm, geen syslog is een foute zaak :/

je hebt nog wel genoeg vrije disk space hoop ik ??

iig, doe even een restart van syslog

[root@server~]# service syslog status
syslogd (pid 1152) is opgestart...
klogd (pid 1156) is opgestart...
[root@server~]# locate *syslogd*
/var/run/syslogd.pid
/usr/share/man/man8/syslogd.8.gz
/sbin/syslogd

syslogd kan ik herstarten eventueel...

top:
6333 root 25 0 45872 41m 1756 R 7.0 2.1 40:04.07 bw.pl
1310 root 25 0 45404 41m 1756 R 7.0 2.1 26:26.29 bw.pl
27924 root 25 0 31200 28m 1724 R 6.7 1.4 1:12.32 bw.pl
3741 root 25 0 38160 33m 1732 R 5.0 1.6 12:51.86 bw.pl
Gelukkig nu wel lage load.

Verder zie ik ook:
2682 root 17 0 0 0 0 Z 1.0 0.0 0:00.55 miniserv. <defunct>

Wat is de volgende stap om dit te kunnen repareren?

Er is nog 5GIG ruimte over, dus ja, nog wel space.