Bekijk Volledige Versie : Mass .nl status check
Ik ben bezig met een script te schrijven dat ahv een lijst met keywords gaat nakijken of het domein reeds geregistreerd is in .be, .nl, .com en .eu.
Nu heb ik een werkend script, maar zit met een rpobleem met de .nl check.
Ik doe dit door een whois te doen van 'in domeinnaam.nl', waardoor er enkel de melding 'domeinnaam.nl is active' wordt teruggeven, en niet de volledige whois gegevens indien de naam reeds geregistreerd is. Deze is echter blijkbaar gelimiteerd in volume, waardoor na enkele queries de melding 'too busy' wordt teruggegeven.
Kent er iemand hier een oplossing voor? Bij .be en .eu kan je gebruik maken van een DAS server, die enkel voor dat doeleinde dient, en die geen restricties heeft wat het aantal queries betreft.
Hoe doen bv grote regisrars dat? Ik kan me niet voorstellen dat die met hetzelfde probleem zitten, daar dat toch vrij crutiaal is voor domeinregistratie.
Triloxigen
31/05/06, 17:24
Als SIDN deelnemer kun je vrijstelling vragen van het limiet voor werkstations, webservers mogen dit niet.
Het idee erachter is dus dat er niet masaal email adressen etc gecopieerd kunnen worden.
De "too busy" melding hebben wij allemaal last van. Een ontheffing helpt niets.
Nee TS, hier is weinig aan te doen. De whois-server van de SIDN is gewoon niet berekend op haar gebruikelijke belasting (zie ook www.whoismonitor.nl) en weigert dan queries, de SIDN moet gewoon dit probleem oplossen. Hooguit kun je de whois-server een paar keer retryen, maar daar wordt je script natuurlijk wel heel erg traag van, dus misschien kun je beter iets naar de klant printen als "error bij SIDN" oid.
Misschien is het toch de moeite waard voor je om met SIDN contact op te nemen. De SIDN ontkent overigens het probleem tegen onze klanten heb ik vandaag gehoord, die krijgen te horen dat het aan ons ligt. Erg vreemd want we kaarten het al jaren aan en we zijn niet de enige. Maar goed. Ik heb ook gehoord van onze account manager dat in het nieuwe SIDN-systeem ook de whois-server gefixt is. Die zou dan eind deze maand online moeten komen. Let's pray!
De 'too busy' melding is geen gevolg van het feit dat je te veel bevragingen hebt gedaan maar omdat de SIDN whois overbelast is.
//edit: is reply op eerste reactie, ondertussen waren er al meer gekomen
ik snap het idee, maar waarom dan speciaal de mogelijkheid bieden om enkel de status op te vragen (zonder gegevens van de licensienemer)?
Bij dns.be (en dus ook bij eurid) doen ze het zo dat je persoonsgegevens enkel kunt opvragen via een webbased whois met CAPTCHA, waar dan nog eens email adressen worden teruggegeven als afbeelding, niet als tekst.
De gewone whois laat enkel onsite contacts zien, en is gelimiteerd tot max 1/sec en een bepaald aantal per uur. Daarnaast hebben ze nog hun DAS, die enkel teruggeeft of de domeinnaam geregistreerd is of niet, niet meer of niet minder, en die mag je dus zoveel queries als je maar wil.
Ach ja, als het niet gaat dan gaat het niet, zo simpel is het. Mss dat het in de toekomst anders is :p
Voor mij is het niet zo'n probleem, daar ik niet echt interested ben in .nl, maar wou het gewoon voor de volledigheid bij in het script hebben.
EURid (/DNS.be) heeft het beter inderdaad. Op hun DAS server deed ik vlak voor de landrush nog duizenden bevragingen per minuut, en ik zal vast niet de enige zijn geweest :)
De 'is'-service is eigenlijk een soort DAS, maar omdat zowel de 'is' als de whois op dezelfde poort draaien is het moeilijker om de infrastructuur te scheiden, wat dus niet gebeurt, en dus moeten zowel de 'is'- als de whois-service lijden onder de hoge load.
Het doel van de 'is' vs gewone bevraging is dat een gewone bevraging maar 15x per IP-adres per dag mag, zo wordt het een klein tikje lastiger voor spammers om emailadressen te vinden, ze moeten dan iets meer proxies gebruiken.
Overigens is er op het Belgisch systeem ook nog wel wat af te dingen: de CAPTCHA is te eenvoudig met slechts twee achtergrondpatronen en is met gocr goed op te lossen ;)
Het systeem van EURid/DNS.be is natuurlijk ook een heel stuk recenter, dan mag je ook verwachten dat een dergelijk systeem meer aan kan. Ik ben overigens heel erg benieuwd hoe het nieuwe DRS4 gaat presteren.
Overigens is er op het Belgisch systeem ook nog wel wat af te dingen: de CAPTCHA is te eenvoudig met slechts twee achtergrondpatronen en is met gocr goed op te lossen ;)
Even tussendoor, jullie kennen PWNtcha ?
http://sam.zoy.org/pwntcha/
:D
lol:
This page is dedicated to everyone who thinks PWNtcha is a hoax, and even managed to prove it. Wow, amazing job!
PWNtcha results
Running PWNtcha...
sh: ./pwntcha: No such file or directory
:p
Keenondots
07/06/06, 10:14
Nou die EURid captcha's pakt hij niet... en dat is misschien maar goed ook :)