Je rebondis sur le post de Jérôme concernant l'usage des proxys par les FAI.

Je viens de tomber là dessus, qui rejoint (un peu) l'idée :

"Ce que Google a fait, c'est appliquer ce système de cache à l'indexation : au
lieu d'indexer une page de multiples fois via ses différents robots (Googlebot,
Mediapartners, Newsearch, Blogsearch etc...), Google a mis en place un proxy
utilisé par ceux-ci. Une page indexée une première fois par l'un des robots et
mise dans le cache pourra donc être y récupérée par les autres robots, réduisant
le nombre d'accès à la page originale.

Ce qu'il faut comprendre, c'est que le fait de participer à Adsense ou d'être
indexé dans Google News n'influe en rien sur l'indexation dans les pages de
résultats web du moteur. Le système ne fait que mettre en cache les pages pour
les servir aux robots qui en font la demande. Ainsi, une page indexée par
Mediapartners (le robot Adsense) ne se retrouvera dans l'index web que si
Googlebot demande cette page et y accède."

http://s.billard.free.fr/referencement/index.php?2006/04/25/228-comprendre-le-cr\
awl-caching-proxy-de-google












---------------------------------
motrech - http://motrech.free.fr/
frutch - http://www.frutch.org/
---------------------------------
Liens Yahoo! Groupes










[Les parties de ce message comportant autre chose que du texte seul on été
supprimées]



---------------------------------
motrech - http://motrech.free.fr/
frutch - http://www.frutch.org/
---------------------------------
Liens Yahoo! Groupes









[Les parties de ce message comportant autre chose que du texte seul on été
supprimées]