Onderwerp: Interesse peiling: Lijst alle geregistreerde .nl domeinen gezamelijk samenstellen

Ik weet niet of het helemaal gepast is hier, maar ik stel de vraag toch maar.

Hebben jullie interesse in een lijst met alle geregistreerde .nl domeinen? Zouden jullie hier (bij interesse) aan bij willen dragen door je domeinen (en die van je klanten) door te geven?

Het gaat me puur om een lijst met de domeinen, andere data hoef ik niet.

Mijn idee is om er een ruilconstructie van te maken: lever je (goede) data aan, dan mag je ook alle data downloaden, anders niet. Zo wordt de lijst ook niet helemaal openbaar.

De toepassing waar ik deze data graag voor zou willen gebruiken: Een domeinchecker die niet afhankelijk is van derden, en waar geen limieten aan zitten. Helemaal 100% kan dit dan natuurlijk nooit kloppen, maar dit is niet erg in mijn geval.

Als je ideeën hebt hoe ik/we het beste aan deze data kunnen komen, laat ze gerust horen! Ook zal er controle op de lijst moeten zijn om de lijst kloppend te houden ivm domeinen die dagelijks worden opgeheven e.d. Hoe dit gedaan moet worden met zoveel domeinen is ook een uitdaging natuurlijk!

Ik ben benieuwd naar jullie ideeën hierover. Ik hoor het ook graag wanneer je hier bezwaar tegen hebt (en waarom).

Ik betwijfel of er hier veel animo voor zal zijn. De meeste hosts hebben een eigen SIDN lidmaatschap en zitten dus meestal niet te worstelen met limieten. Verder denk ik ook niet dat ze zo maar even de lijst met alle domeinnamen in hun beheer willen "opensourcen", en daar kan ik meer dan één reden voor bedenken.

Ook met een SIDN lidmaatschap heb je volgens mij te maken met limieten...

Wat zouden wat jou betreft redenen zijn om geen domeinen openbaar te maken?

Oorspronkelijk geplaatst door Alterview

Ook met een SIDN lidmaatschap heb je volgens mij te maken met limieten...

Wat zouden wat jou betreft redenen zijn om geen domeinen openbaar te maken?

Domeinnamen van klanten openbaar maken zullen weinig/geen hosts aan beginnen, met deze klantendata hoort vertrouwelijk omgegaan te worden. Bovendien zijn de limieten bij de SIDN zeer ruim.

Oorspronkelijk geplaatst door Alterview

Ook met een SIDN lidmaatschap heb je volgens mij te maken met limieten...

Je moet het redelijk bont maken wil je tegen de limieten aanlopen. Verder is de huidige registrar whois voldoende reden om geen gebruik van zo'n lijst te willen maken.

Voor een simple controle of het domein bestaat of niet kun je toch ook gebruik maken van een simple "is" check in plaats van een "whois" check, de "is" check ligt zelf voor niet registars vele malen hoger dan een "whois" check

Oorspronkelijk geplaatst door https://www.sidn.nl/over-nl/whois/domeinnaamgegevens-zoeken/

Is

Is een domeinnaam nog beschikbaar voor registratie? Om dat te achterhalen maakt u gebruik van de Is. Ook kunt u met deze functie uitzoeken of een .nl-domeinnaam is voorbehouden of uitgesloten van registratie. Dit is niet mogelijk met de Whois.

De Is kan worden geraadpleegd door in de Whois de domeinnaam in te vullen. Ook kan de Is via de volgende Unix command line geraadpleegd worden:

whois -h whois.domain-registry.nl 'is [domeinnaam, bijvoorbeeld: 'sidn.nl']'

Oorspronkelijk geplaatst door The-BosS

Voor een simple controle of het domein bestaat of niet kun je toch ook gebruik maken van een simple "is" check in plaats van een "whois" check, de "is" check ligt zelf voor niet registars vele malen hoger dan een "whois" check

Dat is inderdaad wel een handige functie! Heb je enig idee hoe hoog deze limiet ligt voor niet-leden?

Oorspronkelijk geplaatst door Alterview

Dat is inderdaad wel een handige functie! Heb je enig idee hoe hoog deze limiet ligt voor niet-leden?

Als ik me niet vergis was dat iets van 1 request per seconde omgerekend, dus meer dan genoeg om een simpele "bestaat dit domein" check uit te voeren, dns.be & eurid.eu hebben trouwens ook een "is" functie.

M.i. is dan een check op de aanwezigheid van DNS servers bij een domeinnaam een meer secure check. Hierbij ben je ook onafhankelijk van de Whois server(s) en kun je desondanks toch redelijk betrouwbaar checken of de domeinnaam al in gebruik is.

@dreamhost, daar vergis je zich hoor; slechts een handvol (cc)TLD's stellen eisen voor echt werkende nameservers, waaronder .de en geloof ik ook .fr / .it en .es
Alle andere extensies hebben (jammer genoeg) geen NS check tijdens registratie of periode checks

Dus 'is' is daadwerkelijk meer betrouwbaar dan controle op (D)NS ;-)

@TS, nobele doel, maar eerlijk gezegd - kansloos

@SmilieBG: Als iemand het kansloos noemt, motiveert het me juist om het tegendeel te bewijzen

@dreamhost_nl: Ik heb al eens met dns checks gespeeld, maar dit is niet heel erg betrouwbaar hoor. Dan vallen er toch heel wat domeinen buiten de boot...

Misschien dat dit op te lossen is door de combineren met een "IS" check... Maar heel hard gaat het niet, en dat moet wel met 5.308.125 domeinen (op moment van schrijven). De lijst zal toch elke dag gecheckt moeten worden, wil je een compleet beeld hebben én houden... Dit betekent dat er bijna 64 domeinen per seconde moeten worden gecheckt. En dat is wel erg veel natuurlijk!

Nu rest me nog wel een vraag (eigenlijk twee): is er interesse in een complete lijst? (Op wat voor manier deze dan ook samen wordt gesteld?) Zo ja, waar zou jij deze lijst voor willen gebruiken?

@Alterview, het is mij niet compleet duidelijk waarom zou je zo een lijst maken? Ik bedoel, er is al instantie welke dat regelt en dergelijke lijsten / statistieken heeft - ze heten SIDN. Alle SIDN deelnemers kunnen al enige statistieken zien omtrent aantal geregistreerde domeinen, aantal mutaties, per maand / kwartaal / jaar enzovoort.

Maar goed, om je vraag te beantwoorden, ik zie geen nut in dergelijke lijst persoonlijk (of zakelijk for that matter).

In iedere geval succes hoor

Ik heb even een simpele site opgezet waarop je aan kunt geven of je interesse hebt, of makkelijk contact op kunt nemen:
http://domainlist.alterview.nl/

Ik moet de rest hierin toch volgen, lijkt me kansloos aangezien er al een dienst voor bestaat namelijk de whois en is check van sidn zelf. Waarom zou je dit dan willen dupliceren (wat trouwens volgens mij niet eens mag) in een systeem dat altijd hopeloos achter zal lopen.

Begrijp me niet verkeerd, ik vindt het een nobel doel alleen zie ik de meerwaarde er niet van in. Ik denk zelfs eens je het systeem werkend hebt en je evenveel aanvragen krijgt als sidn dat je ook snel een max aantal request zult hanteren om je server load te beperken. Want heb je er technisch al even bij stil gestaan wat je allemaal nodig hebt om dit te kunnen verwezenlijken om zowel request uit te voeren naar sidn als request te ontvangen van mensen die willen weten of het domein bestaat of niet.

Ik ben het met mijn collega's hierboven eens. Het is kansloos. Ik denk dat je nooit kan vertrouwen op zo'n lijst, 1800 bedrijven moeten bereid zijn om jou altijd up to date info te geven. Er hoeft maar 1 top SIDN bedrijf bij te zitten die niet meedoet en je lijst kan zomaar een half miljoen domeinen missen....