Traffic HTTP in?

[24hosted BV]

Bij controle van één van onze servers kwamen we tegen dat een klant van ons een dataspider gebruikt binnen zijn hostingpakket. Natuurlijk geen probleem alleen al het dataverkeer dat hij hiermee genereerd, dagelijks uur lang trekt hij netwerkpoort 100 Mbit voor 70% vol. Nu viel het direct op dat klant alleen heel weinig dataverkeer gebruikt volgens Plesk.

Na controle zie ik in Plesk bij HTTP IN nooit dataverkeer staan, hier staat steeds 0 MB. Bij de instellingen binnen Plesk staat wel aangegeven binnenkomend en uitgaand verkeer meten. Ook overig verkeer zoals FTP, SMTP enz worden wel gemeten.

Normaal zou ik hier niet echt wakker van liggen maar deze klant gebruikt gewoon erg veel en om het ook bij andere klanten in kaart te brengen wel een belangrijke stap.

Heeft iemand een idee waar dit aan kan liggen?

Server specs:

Plesk 8.6
Cent OS 5.2

[t.bloo]

Als hij dat dataverkeer met een PHP script of iets dergelijks genereert, dan zie je het niet terug in de HTTP (apache) logs. En dus niet in je tellertjes. Is overigens bij alle control panels zo, is namelijk een beperking van je webserver component. Dit heb je ook met ssh, wget, rsync etcetera verkeer.

Er zijn wel oplossingen zoals het verkeer van die klant over een (virtuele) netwerk poort laten lopen en daarvan de teller er handmatig bij klussen. Of bijvoorbeeld een VPS gebruiken. Zelf hebben we een kernel uitbreiding en een brak script om de logging hiervan te parsen.

Als je het IP adres weet, dan kun je makkelijk met IPTABLES tellers iets maken.

[MMaI]

gebruik iets als mrtg met cacti om betrouwbare data/traffix grafieken te genereren.

Als je echt het dataverkeer wil meten kom je niet om een managed switch heen, die al het verkeer telt wat over een poort loopt zodner dat er zaken aan ontsnappen

.:edit:.
blijkbaar is er een integatie mogelijk voor plesk, zie http://forums.modernbill.com/showthread.php?t=14199

[t.bloo]

Als je echt het dataverkeer wil meten kom je niet om een managed switch heen, die al het verkeer telt wat over een poort loopt zodner dat er zaken aan ontsnappen

Dat werkt alleen als het om een dedi of colo gaat, maar het gaat denk ik om een shared server. Een switch weet niet van welke user het verkeer is.

[MMaI]

Dat werkt alleen als het om een dedi of colo gaat, maar het gaat denk ik om een shared server. Een switch weet niet van welke user het verkeer is.

missed that part, bedankt voor de aanvulling

[Mikey]

hoe zit het met de max executie time ?

[24hosted BV]

hoe zit het met de max executie time ?

Dat is wel van toepassing, maar het betreft allemaal losse processen. Wel zouden we de klant kunnen schalen, alleen het dataverkeer zal blijven. Naar verwachting gebruikt klant nu ongeveer 6 GB per dag ipv de toegestane 6 GB per maand waar hij voor betaald.

Het betreft een Shared-hosting, dus op basis van Managed Switch kunnen we dit niet traceren. Of we zouden op IP basis moeten gaan kijken. Maar zit meer naar een Plesk oplossing te kijken, dan gaat het direct in facturatiesysteem mee.

[t.bloo]

Ik weet niet hoe het bij Plesk precies zit, maar bij DirectAdmin kun je in een file (bandwidth.tally) extra entries aanmaken. Deze worden dan bij je standaard verkeer meegeteld en zijn voor de eindgebruiker niet van het andere verkeer te onderscheiden. Met een cron scriptje kun je dat dan zelf automatiseren.

[Mikey]

Of we zouden op IP basis moeten gaan kijken.

Hoe wou je php dwingen om over een bepaald ip te gaan ?

[24hosted BV]

Hoe wou je php dwingen om over een bepaald ip te gaan ?

Klopt zat ik later ook even aan te denken, is geen oplossing.

[VinceSTM]

klant eruit gooien op basis van je algemene voorwaarden?

[24hosted BV]

klant eruit gooien op basis van je algemene voorwaarden?

Ik vind geen probleem als klant maar betaald voor de diensten die hij gebruikt.

[Triloxigen]

Ik vind geen probleem als klant maar betaald voor de diensten die hij gebruikt.

Ik vermoed dat hij dan liever naar een andere partij gaat en die voor de gek houd _

[24hosted BV]

Ik vermoed dat hij dan liever naar een andere partij gaat en die voor de gek houd _

Die kans zit erin, maargoed om het in de toekomst voor te zijn nu direct oplossing zoeken.

[Dennis]

24hosted BV: Worden de statistieken in webalizer/awstats wel correct verwerkt? Indien dit niet aan staat, zou ik dit aanzetten.

Het hangt er wel vanaf hoe het PHP script wordt gedraaid of Plesk het dataverkeer meet. Nul-waardes voor HTTP in is sowieso incorrect.

/usr/local/psa/admin/sbin/statistics --calculate-one --domain-name=domein.nl

Krijg je bijzondere meldingen? Stopt statistics voordat hij alle statistieken heeft gedraaid?

Kun je verder de werking van de spider toelichten? Gaat het om een spider die door PHP gedraaid wordt, maar volledig buiten Apache om gaat? Rechtstreeks via cronjob, e.g. /usr/sbin/php -q /var/www/vhosts/domein.nl/private/spider/spider.cron.php >/dev/null 2>&1.

Wellicht kan ntop je overigens nog helpen in het genereren van de correcte dataverkeer statistieken.