PDA

Bekijk Volledige Versie : Nzb site opzetten.



blackdragon
07/08/07, 22:49
Heey whtérs,


Ik wil mischien een nzb site opzetten zoals binsearch.net/newsleech.com etc..

Ik heb het script zelf al wel.. maar nu de server nog..



Waarmee kan je voor het begin al goed mee uit te voeten kwa server?
Voldoet een vps'je al ? of moet je al met minimaal een dual core dedi een nzb site draaien ???


Tips zijn welkom!




Alvast bedankt

nielsrenselaar
07/08/07, 22:57
Je geeft wel wat weinig informatie om iets op te baseren... Dingen zoals: sla je zelf de nzb's op, of ga je er naar toe linken, of creeer je ze on-the-fly? Draaien er cronjobs, zo ja wat doen deze zoal? Wat is het verwachtte bezoekersaantal?

Zonder cijfers is het lastig schatten....

blackdragon
07/08/07, 22:59
Ik ben wel van plan dan ze dan on-the-fly te creeeren, en cronjobs draaien dan ook.. bezoekers aantal hoop ik toch rond de 10.000 per maand te hebben de eerste paar maanden

Stewie
07/08/07, 23:26
Dan heb je een serverpark nodig.
Voorbeeld newzbin, zij hebben een rack met 15+ servers draaien. Je hebt sowieso een dikke database server nodig met 500+ GB storage en 2 of meer front-ends. Daarnaast nog een inlees server en een fileserver voor backups. Liefst redundant inlees servers, want als je een stukje mist ben je de pineut.

blackdragon
07/08/07, 23:28
Ja maar stel wat heb ik nodig voor een "begin" ik weet zelf ook dat binsearch een compleet server park heeft etc.. maar ik wil graag weten wat ik moet hebben voor een begin uitbreiden kan altijd..

Stewie
07/08/07, 23:29
Ja maar stel wat heb ik nodig voor een "begin" ik weet zelf ook dat binsearch een compleet server park heeft etc.. maar ik wil graag weten wat ik moet hebben voor een begin uitbreiden kan altijd..

Laten we dan beginnen met de vraag wat jij al weet? Je praat over single core en dualcore, maar je uberhaupt wel wat er op je af gaat komen laat staan wat de load daarvan zal zijn?

blackdragon
07/08/07, 23:32
Load zal intens zijn dat weet ik wel.. met dual core e6600 bijv met 2gb ram en 2x 160GB schijven.. en je hebt 15Qeuries per sec.. nou dat zal hij niet prettig vinden.. maar als ik nou eenmaal een begin heb dan kan ik altijd uitbreiden dat is het punt niet.. of raden jullie mij dit idee totaal af?

Stewie
08/08/07, 00:19
Weet je wel hoe je de data gaat inlezen laat staan opslaan? Dan heb je aan genoemde hardware veruit te weinig. Je kijkt nu namelijk alleen naar de bezoekers van de site :)

blackdragon
08/08/07, 10:51
Hm zo te zien word het denk ik een flinke investering... dan denk ik dat ik dit idee maar even aan de kant schuif.. maar alsnog bedankt!

guidob
08/08/07, 12:08
Wel script ga je gebruiken?

blackdragon
08/08/07, 12:18
Ik had ergens nog een script liggen maar die is voor 80% aangepast door mij

Paulewk
08/08/07, 12:41
Dan heb je een serverpark nodig.
Voorbeeld newzbin, zij hebben een rack met 15+ servers draaien. Je hebt sowieso een dikke database server nodig met 500+ GB storage en 2 of meer front-ends. Daarnaast nog een inlees server en een fileserver voor backups. Liefst redundant inlees servers, want als je een stukje mist ben je de pineut.

Onzin eerste klas.

In de toptijd deed usenetsearch.eweka.nl meer als 2 miljoen hits per dag.

Dit is maar 1 machine, een quad opteron met 8GB geheugen, misschien dat newzbin nog veel meer bezoekers doet, maar 15+ servers lijkt me nogal overtrokken.

Overigens TS, ik neem aan dat je je headers gaat indexeren, ik zou dit eerst met een USP communiceren als je niet je eigen nieuwsserver draait, tís namelijk zeer waarschijnlijk dat dit tegen de algemene voorwaarden van de USP is. Eweka staat dit niet toe.

O en nog iets, je gaat een bak aan bandbreedte nodig hebben, om alle headers van usenet op te halen....

Stewie
08/08/07, 13:01
Tja, ze hebben het dan ook stabiel opgebouwd he :)
Geen spof

Paulewk
08/08/07, 13:21
En daar heb je 15 dozen voor nodig? Dat is gewoon onzin.

Stewie
08/08/07, 13:51
Mwah, ze zijn de indexering aan het uitbouwen naar 500 dagen. Ze indexeren alle files + user(comments) systeem.

Mark17
08/08/07, 16:06
Onzin eerste klas.

In de toptijd deed usenetsearch.eweka.nl meer als 2 miljoen hits per dag.

Dit is maar 1 machine, een quad opteron met 8GB geheugen, misschien dat newzbin nog veel meer bezoekers doet, maar 15+ servers lijkt me nogal overtrokken.

Overigens TS, ik neem aan dat je je headers gaat indexeren, ik zou dit eerst met een USP communiceren als je niet je eigen nieuwsserver draait, tís namelijk zeer waarschijnlijk dat dit tegen de algemene voorwaarden van de USP is. Eweka staat dit niet toe.

O en nog iets, je gaat een bak aan bandbreedte nodig hebben, om alle headers van usenet op te halen....

Voor zover mij bekend zijn er USPs die het wel toestaan (mogelijk tegen een hoger tarief dan een normale usenet account). Vergeet niet dat ze mogelijk een lijst aan voorwaarden hebben (mogelijk zelfs colocatie/dedicated server bij hun afnemen).

maxnet
08/08/07, 16:30
Specs van de systemen van Newzbin: http://docs.newzbin.com/index.php/Newzbin:Server_Specs

En ja, het kan met minder.
Ligt er maar net aan hoe efficient je de gegevens verwerkt.