Na wat zoeken blijkt dat Google zelfs hele sites plat gooit door behoorlijk agressief te indexeren. Vele webmasters weren Google inmiddels van hun site.

Probeer je dus te via Google iets te zoeken op MacFreak, dan krijg je dus niet de laatste informatie te zien. [/news]

Wel interessant om te onthouden dat Google dus blijkbaar nogal wat trafiek kan genereren. Als ik ooit m'n database op een site gooi zal ik daar zeker rekening mee moeten houden ... als ik het me dan uberhaupt nog kan herinneren

TLM

(Bewerkt door TLM om 13:35, 27-02-2004)

Hier, ik liet Google even toe tot de site... moet je eens zien wat er gebeurde...

Ik gebruikte vroeger (op m'n ter ziele gegane site) altijd Analog, maar 'k heb de indruk dat dit programma al door velen voorbijgestoken is.

TLM

Of dat 24/7 moet is inderdaad een heel ander verhaal.

Maar is dat niet meer een probleem voor Site-moderators cq eigenaars dan voor mij als 'toevallige' bezoeker?

En het is niet alleen een probleem van site beheerders... Ook jij als "toevallige" bezoeker zal hier last van ondervinden omdat Google gewoon (zie image) een enorme load veroorzaakt op de server. Dit komt de performance van je site niet ten goede. [/news]

Eiji om 20:42, 27-02-2004
heb je eraan gedacht dat het eventueel aan jouw safari zou kunnen liggen, dat die kapot is? Dit is niet de eerste keer dat je een probleem met jouw safari op het forum zet. Is maar een idee en waarschijnlijk zal het niet kloppen, maar de kans is er

[news]Onzin in zijn meest pure vorm. A) Safari staat hier helemaal los van en B) de problemen die ik meld m.b.t. Safari zijn algemeen bekende problemen de zelfs de developer van Safari bevestigd. Lijkt mij een klare zaak dacht ik zo... Ik ben niet iemand die zomaar begint te brullen zonder alle mogelijke opties op voorhand te hebben onderzocht.

Ik heb sinds Google niet meer toegelaten wordt op de site een reductie waargenomen in de load op de server van tussen de 20 en 30%. Dit geeft naast de getoonde grafiek en de entries in m'n logfiles al aan dat Google een behoorlijke impact heeft op een site, wat ik ook eerst onderzocht heb alvorens hierover te beginnen. Ik ben nu eenmaal dol op feiten. Overigens heb ik net een mailwisseling met de engineers van Google achter de rug, en die bevestigen het probleem en ik zou niet de eerste zijn die hierover geklaagd heeft. MacFreak zal nu slechts een maal per dag geïndexeerd worden. Het probleem is dus bij de bron aangepakt, en daarmee is het probleem ook keurig opgelost.[/news]

Thomas