PDA

Bekijk Volledige Versie : Hoe Google 30 biljoen web paginas doorzoekt, 100 miljard keer per maand



Domenico
05/03/13, 18:15
English? Click here -> How Google searches 30 trillion web pages, 100 billion times a month (http://wht.to/101m4Jj)


Hoe verwerk je 100 miljard zoekopdrachten per maand?

Google geeft een inside peek (http://wht.to/101m4Jj) hoe het zoeken via Google nu eigenlijk werkt.

Zoeken begint natuurlijk met het crawlen en indexeren, en Google zegt dat het web nu 30 biljoen unieke afzonderlijke pagina's heeft. Dat is 30 keer zoveel als vijf jaar geleden: Google rapporteerde in 2008 dat het web slechts een biljoen pagina's behelste.

Google zegt dat de informatie van die 30 biljoen pagina's in de Google-index nu zo'n 100 miljoen gigabytes oplag in gebruik neemt. Dat is ongeveer duizend terabyte, zo'n drie miljoen 32GB USB-sticks.

Om te testen hoe goed de zoekopdrachten daadwerkelijk presteren gebruikt Google mensen: zogenaamde search evaluators. Veertig duizend keer per jaar controleren Google testers de resultaten van de zoektechnologie, ze bekijken hoe het werkt en geven suggesties over hoe en waar te verbeteren.

En hoe zit het met link/pagina spam?

Google zegt dat het site eigenaren zo'n 40,000-60,000 per maand meedeelt wat zij zien als spam of dat ze zijn gehackt.


Voor een zeer uitgebreide en mooie uitleg in het Engels zie Google (http://wht.to/101m4Jj).

Yourwebhoster
05/03/13, 18:26
Nice:) Ik zie dat schrikbarend weinig website eigenaren problemen met hun website ook echt aanpakken. Ik had niet verwacht dat het 100% zou zijn maar wel wat meer dan ze aangeven.

Apoc
05/03/13, 19:24
Die site is ook een mooie demonstratie van responsive design

systemdeveloper
05/03/13, 21:58
Haha, ik zie het al voor me... een heel datacentrum vol met usb sticks.. Logisch dat ipv4 bijna op is :)

TotallyHosted
06/03/13, 13:09
Het blijft onvoorstelbaar hoe snel zij hun eigen data doorzoeken om jou binnen een fractie van een seconde een zoekresultaat voor te schotelen.

polle@vip.nl
06/03/13, 15:12
Parallax scrolling you love it or hate it. desalniettemin mooi inzichtelijk gemaakt

Mark17
06/03/13, 23:39
Het blijft onvoorstelbaar hoe snel zij hun eigen data doorzoeken om jou binnen een fractie van een seconde een zoekresultaat voor te schotelen.

Vroeger waren de resultaten echter wel beter. Met name als je iets zoekt en op een letterlijke string wilt zoeken is het er niet beter op geworden.

Wel blijft het knap hoe snel het is.