Bekijk Volledige Versie : Name server wijziging, Google resultaten daalden drastisch
Één goedemiddag,
Ik heb laatst een niet nader te noemen osCommerce webshop (wel via PM oid) verhuisd naar mijn VPS (met overcapiciteit), omdat de standaardhosting te klein werd voor de website. Bezoekersaantallen van zo'n 300-400 per dag. Vooraf zijn er ook enkele wijzigingen qua domeinnaamregistratie doorgevoerd, zodat alles op 1 plek was. Eerst is de domeinnaamhouder op bedrijf gezet in plaats van naam. Dit is echter op 9 mei door Mihosnet gedaan (hierop zijn de stats niet gedaald).
Op de gewraakte datum 26 juni zijn de domeinnaamservers van de 3 stuks van mihosnet naar die van 2 van JR Online gegaan (ns6.jronline.nl, ns3.hostnederland.nl). Bij JR Online stond uiteraard het oude IP-adres opgegeven, die van Mihosnet, waar de website tot ik zover was zou blijven. In principe dus een naadloze verhuizing.
Wat schetst mijn verbazing dan op 26 juni? De bezoekersaantallen! Naar nu blijkt zijn is de Google positie enorm verslechterd! Zoals ik in een ander draadje beschreven heb: forums.oscommerce.nl/index.php?showtopic=16148 (zelf even kopiëren ivm "To be able to post links your post count must be 10 or greater. Your post count is 4 momentarily."), zou dit kunnen liggen aan de PTR records en dus reverse DNS lookup. Echter, ik heb het oude IP nog even getest én, wat bleek? De reverse DNS levert daar niet het juiste resultaat op (verwijst naar een andere site, dan wat op dat IP te vinden was!). (zie stats_old_server.png)
Wat schetst dan mijn verbazing op 11 juni? De bezoekersaantallen nogmaals! Op die dag plots 250 bezoekers. Een foutje van Google? (zie stats_new_server.png). Echter dit wakkerde valse hoop aan, de volgende dag waren de bezoekersaantallen weer even laag als voor mijn aantreden als webmaster (-prutser :p).
Het is wel duidelijk dat er minders bezoekers via Google komen, ik gebruik een (te) gedetailleerd stats systeem (uit 1 van de contributies van osCommerce).
Hoe kan een nameserver wijziging dit veroorzaken (zijn niet gezwartlijst voor zover ik weet) :huh:
Google research leverde weinig op, Google's webmaster tools rapporteerde ook nu niet bepaald problemen. Nog eenmaal voor de duidelijkheid! Zonder dat er iets op de de oude server wijzigde daalden ook hier de aantallen! 2 dagen later is toen de website verhuisd (hopende dat dit zou helpen, niet dus).
Het is nu niet leuk meer ->|
Alvast heel erg bedankt namens eigenaar van de shop en mij!
(ik kon geen goed forum vinden om dit probleem in te plaatsen, er is niet iets als een SEO of DNS/nameserver forum)
crazycoder
21/07/07, 15:03
PTR records worden door de "eigenaar" van het IP geregeld, of via je eigen DNS als het IP daaraan gedelegeerd is. Vrij weinig kans dat je wijziging van nameservers dit gevolg had.
Als de nameservers deugdelijk opgezet zijn en goed bereikbaar, dan verwacht ik niet dat je dergelijke problemen zou mogen krijgen.
Wellicht een andere oorzaak, zoals bonuspunten van google?
Nee, PTR wordt opgevraagd aan de nameservers! Dus toen deze op 26 juni wijzigden, kwam er een ander antwoord op de Reverse DNS lookup:
Asking a.root-servers.net for ***.***.249.87.in-addr.arpa PTR record:
a.root-servers.net says to go to sec1.apnic.net. (zone: 87.in-addr.arpa.)
Asking sec1.apnic.net. for ***.***.249.87.in-addr.arpa PTR record:
sec1.apnic.net [202.12.29.59] says to go to ns6.jronline.nl. (zone: ***.249.87.in-addr.arpa.)
Asking ns6.jronline.nl. ***.***249.87.in-addr.arpa PTR record: Reports ***.nl. [from 62.212.81.18]
De nameserverwijziging vond plaats op 26 juni:
Datum registratie 04-07-2001
Datum laatste wijziging 26-06-2007
Dat correleert aardig met de bezoekersaantallendaling. Tevens heb ik contact gezocht met de klanten. Zij reporteerden geen enkele connectiviteitsproblemen te hebben. Als die er al zouden zijn, dan zouden de stats nu weer hersteld moeten zijn!
De PTR is dus wel gewijzigd, echter deze was op de oude server ook fout (!)
Dus ik blijf bij mysterieuze problemen rondom de nameservers icm Google...
Bonuspunten? Wat zijn dit en waarom zou die dan juist op 26 juni verdwijnen? Zie voor de volledigheid de (natuurlijke) aanwas van bezoekers dit jaar in de bijlage (ook te vinden in het draadje op forums.oscommerce.nl).
Hier soortgelijk probleem gezien. Dit bij een verhuizing van NL server naar strato VPS (DE). Na daling van bezoekers via Google besloten om alles terug te draaien. Pas maanden later leek de schade hersteld en zit het bezoekersaantal dat via Google komt weer op normaal peil.
Weet echter wel dat een daling in Google door honderden factoren die je niet allemaal zelf in de hand hebt kan worden bepaald.
Toch heb ik wel het idee dat nameservers | config | serverslocatie | laadsnelheid | pingtijden ed... een lichte invloed kunnen hebben.
Verder misschien handig om Google analytics te gebruiken, kun je per zoekmachine zien hoeveel bezoekers er komen en nog veel meer details.
Ik zal analytics er idd nog even op zetten, maar voorgaande gegevens missen. Maar als eerder gezegd, in mijn web stats sys zag ik bij 70% van de mensen google als referer staan. Nu zijn dat er significant minder.
Het betreft hier niet zozeer de verhuizing naar mijn VPS (geen strato ;-). Immers de site stond nog 2 dagen op de oude server en ook daar is ook de daling te zien. Een daling die nog niet hersteld is op de nieuwe server, buiten die ene dag...
Tevens gaat het hier niet om een lichte invloed. Het gaat hier om een daling van het aantal bezoekers met 75%.
Vooral die ene dag, 11 juni, is onbegrijpelijk, onnavolgbaar. Fout van google?
Bedankt voor het meedenken zover, het is maar goed dat er in elk geval niemand z'n inkomen van af hangt...
Tevens gaat het hier niet om een lichte invloed. Het gaat hier om een daling van het aantal bezoekers met 75%.
Ben je niet gewoon gezakt in de lijst met zoekresultaten?
swedendedicated
21/07/07, 20:22
Hier heb ik het een keer gehad met een affiliate program, dns gewijzigd, en opeens bijna geen clicks meer, ik heb nog steeds geen idee hoe het kwam.
crazycoder
21/07/07, 20:34
Nee, PTR wordt opgevraagd aan de nameservers! Dus toen deze op 26 juni wijzigden, kwam er een ander antwoord op de Reverse DNS lookup:
Weet ik. Maar niet per definitie aan de dns die voor de forward lookup zorgt. Na de verhuizing zijn ze in ieder geval gewijzigd.
Bonuspunten? Wat zijn dit en waarom zou die dan juist op 26 juni verdwijnen? Zie voor de volledigheid de (natuurlijke) aanwas van bezoekers dit jaar in de bijlage (ook te vinden in het draadje op forums.oscommerce.nl).
Hmm wat dacht je dan van strafpunten? Bijv. vanwege iets teveel zoekmachineoptimalisatie, meer specifiek verboden truukjes.
Ik weet niet of dat voor jou het geval is. Maar waarom zou het niet op 26 juni toe kunnen worden gepast? Kan toeval zijn..
Ben je niet gewoon gezakt in de lijst met zoekresultaten?
Waarom uitgerekend op de dag van nameserverwijziging? Op deze dag wijzigde er niets aan van welk IP de site kwam, niets verder aan de SIDN-gegevens dan de nameservers...
Waarom opeens een dag met opeens veel meer bezoekers dan?
Ik weet niet of dat voor jou het geval is. Maar waarom zou het niet op 26 juni toe kunnen worden gepast? Kan toeval zijn..
Er is hier (helaas, want dan zou het gewoon verklaarbaar zijn) geen sprake van teveel optimalisatie. De zowat enige optimalisatie die plaatsvond is elke pagina een unieke titel, gewoon op basis van het product. Uiteraard niets verborgen teksten en andere no-go's. Als dit het geval was, zou het raar zijn dat er zomaar een dag zou zijn met nog wel veel bezoekers... Bovendien geven de 'webmaster tools' van google totaal geen mogelijke problemen.
Een dergelijke daling in resultaten heb ik niet gehad toen ik de name servers ging wijzigen van mijn eigen website... Hoewel die dan iets minder afhankelijk van google is...
Contact opnemen met google is wat lastig :(
Ten overvloede nog wat webalizer stats. Mocht je meer gegevens nodig hebben om tot een verklaring te komen, ze zijn verkrijgbaar.
Bekijk ook even http://www.netlash.com/log/googles_dirty_little_secret
Hoi Wonko,
Zeer interessant! De daar bijgesloten grafieken lijken qua symptomen nogal op die van mij. Echter de website IP veranderde niet toen de daling al zichtbaar werd. Ook is de samenstelling van verkeer uit diverse landen niet schokkend veranderd (zie bijlagen), sterker nog, verbeterd, meer uit Nederland.
Hmm, uit de commentaren:
"Have you tried emailing anyone at Google about this? I'm sure if you have logs to back up yuur argument, they would lend a sympathetic ear. I'm really curious what they tell you to see if they really mean all of that "no evil" or if it's all bullshit."
Sterkt mij toch wat :)
De methoden die Google gebruikt zijn in grote lijnen bekend, omdat ze daar verschillende patenten op hebben aangevraagd.
En ja, daarbij wordt ook naar de nameservers gekeken.
Hoewel het natuurlijk lastig te bepalen is of het hier in dit geval ook aan ligt.
http://appft1.uspto.gov/netacgi/nph-Parser?TERM1=20050071741+&Sect1=PTO1&Sect2=HITOFF&d=PG01&p=1&u=%2Fnetahtml%2FPTO%2Fsrchnum.html&r=0&f=S&l=50
[0096] Domain-Related Information
[0097] According to an implementation consistent with the principles of the invention, information relating to a domain associated with a document may be used to generate (or alter) a score associated with the document. For example, search engine 125 may monitor information relating to how a document is hosted within a computer network (e.g., the Internet, an intranet or other network or database of documents) and use this information to score the document.
[0098] Individuals who attempt to deceive (spam) search engines often use throwaway or "doorway" domains and attempt to obtain as much traffic as possible before being caught. Information regarding the legitimacy of the domains may be used by search engine 125 when scoring the documents associated with these domains.
[0099] Certain signals may be used to distinguish between illegitimate and legitimate domains. For example, domains can be renewed up to a period of 10 years. Valuable (legitimate) domains are often paid for several years in advance, while doorway (illegitimate) domains rarely are used for more than a year. Therefore, the date when a domain expires in the future can be used as a factor in predicting the legitimacy of a domain and, thus, the documents associated therewith.
[0100] Also, or alternatively, the domain name server (DNS) record for a domain may be monitored to predict whether a domain is legitimate. The DNS record contains details of who registered the domain, administrative and technical addresses, and the addresses of name servers (i.e., servers that resolve the domain name into an IP address). By analyzing this data over time for a domain, illegitimate domains may be identified. For instance, search engine 125 may monitor whether physically correct address information exists over a period of time, whether contact information for the domain changes relatively often, whether there is a relatively high number of changes between different name servers and hosting companies, etc. In one implementation, a list of known-bad contact information, name servers, and/or IP addresses may be identified, stored, and used in predicting the legitimacy of a domain and, thus, the documents associated therewith.
[0101] Also, or alternatively, the age, or other information, regarding a name server associated with a domain may be used to predict the legitimacy of the domain. A "good" name server may have a mix of different domains from different registrars and have a history of hosting those domains, while a "bad" name server might host mainly pornography or doorway domains, domains with commercial words (a common indicator of spam), or primarily bulk domains from a single registrar, or might be brand new. The newness of a name server might not automatically be a negative factor in determining the legitimacy of the associated domain, but in combination with other factors, such as ones described herein, it could be.
[0102] In summary, search engine 125 may generate (or alter) a score associated with a document based, at least in part, on information relating to a legitimacy of a domain associated with the document.
Google werkt dat dus wel snel bij. Zou het zin hebben en is het überhaupt enigzins mogelijk om contact op te nemen met Google?
Op deze manier belemmert google de vrije markt doordat niemand zo meer durft te verhuizen naar een andere server, uit angst bezoekers te verliezen! Zou een pakkende titel voor een fax zijn:
"Google's strategie belemmert vrije marktwerking"
Iets vindt Google blijkbaar niet leuk aan de name server en/of name server wijziging...
Google is google. Dat jij meer bezoekers krijgt dank zij google is mooi meegenomen. Je kan altijd nog betaald adverteren als het zo belangrijk voor je is.
Ik ben het met je eens dat je nooit moet vertrouwen op zoekmachines als enige bron van bezoekers. De vraag is hier echter meer om te kijken waardoor google je zo opeens zo laat zakken... Dit is dan misschien ook een interessante vraag voor google zelf... Ik begrijp namelijk dat dit toch vrij uniek is, omdat er niet veel geswitcht wordt qua hosting of nameservers. Ook staan de nameservers uiteraard niet ergens te boek...
<offtopic>
Het is altijd handig om eerst de gewone zoekresultaten op orde te hebben, voordat je Adwords gaat gebruiken. Als bekend, is je Adwordpositie onder andere afhankelijk van de doeltreffendheid van pagina's
</offtopic>
edit, uit dat patent, getipt door maxnet, een beter passend stukje (het gaat denk ik niet zozeer om de legitimiteit van het domein):
1. A method for scoring a document, comprising: identifying a document; obtaining one or more types of history data associated with the document; and generating a score for the document based on the one or more types of history data.
38. The method of claim 1, wherein the one or more types of history data includes domain-related information corresponding to domains associated with documents; and wherein the generating a score includes: analyzing domain-related information corresponding to a domain associated with the document over time, and scoring the document based, at least in part, on a result of the analyzing.
40. The method of claim 38, wherein the domain-related information is related to at least one of an expiration date of the domain, a domain name server record associated with the domain, and a name server associated with the domain.
Oftewel, de score is omlaag gegaan door de veranderde name server. Is dat de treurige conclusie? Dan durft vanaf nu toch niemand zijn name servers te veranderen? En wat dan nog vanwege 11 juli, waarop er opeens zoveel bezoekers waren...
Oftewel, de score is omlaag gegaan door de veranderde name server. Is dat de treurige conclusie? Dan durft vanaf nu toch niemand zijn name servers te veranderen?
Conclusies vallen moeilijk te trekken, gezien moeilijk te bepalen is of het ook daadwerkelijk daar aan ligt.
Ik denk dat voor de meeste sites een paar punten meer of minder niet veel uitmaakt, gezien de site op veel dingen beoordeeld wordt.
Echter op het moment dat het een site betreft die nog niet al te lang bestaat, met een niet al te hoge pagerank en relatief weinig originele content (er vanuitgaand dat het een standaard osCommerce winkel/template is), dat dan die paar punten wel een grotere impact kunnen hebben.
Het analyzeren van nameserver gegevens is overigens niet nieuw, en wordt door meerdere bedrijven gedaan.
Hoewel bij .nl domeinen hiervoor de nameservers per domein opgevraagd moeten worden, kan het bij andere domeinen efficenter.
Bij bijv. .com en .net domeinen plaatst Verisign-GRS tweemaal per dag een overzicht van alle domeinen en bijbehorende nameservers op hun FTP site.
Op het moment dat er een nieuw .com domein geregistreerd wordt, vervalt, of er iets wijzigt weten zoekmachines dat dus erg snel.
Elke wijziging in het domein zelf levert een verlaging van je pagerank op. Daar zijn wij inmiddels ook achter. Het duurt dan weer enige tijd voordat je pagerank weer omhoog gaat. Vaak gaat het binnen een maand of 4 alweer snel richting het oude niveau.
@maxnet
Daar kan ik goed mee ingaan. De site was inderdaad vrij afhankelijk van toevallig aardige positie. Er zijn vrij weinig verwijzende links.
@almar
Dat zullen we in het vervolg dus maar voor lief moeten nemen...
Iedereen bedankt voor de bijdrage! :W::lovewht:
Ik post nog even wanneer de stats weer wat hersteld zijn (vandaag al weer meer bezoekers).