La vie d'une page sur le web est ponctuée en général de nombreuses visites, que ce soit de visiteurs (humains), de robots de moteurs de recherche voire de logiciel (aspirateurs de sites). Si la dernière catégorie n'intéresse pas vraiment le webmaster, il souhaite en général augmenter la fréquence des deux autres... Intéressons-nous aux visites des robots, par exemple celles de GoogleBot, le robot de Google.

Référencer des nouvelles pages

Après des heures de travail acharné, le webmaster publie enfin sa page sur son site. Il aura beau attendre des jours entiers, personne ne viendra la voir tant qu'il ne communiquera pas son adresse (URL). Pour la signaler à GoogleBot, il est possible d'aller remplir le formulaire de soumission d'URL, mais il vaut mieux tout simplement ajouter des liens vers cette page à partir de pages déjà indexées.

En fonction du nombre de liens et de l'importance des pages sur lesquelles figurent les liens (leur PageRank), GoogleBot va mettre entre 12h et 1 mois à venir voir cette nouvelle page. Il est facile de détecter son passage, soit en analysant les fichiers log, soit en utilisant Analyse des visites de Google ,RobotStats, un outil d'analyse temps réel des visites de GoogleBot.

En prenant le cas d'une page visitée dans les 12h qui suivent sa mise en ligne, il faut attendre en général encore quelques heures pour la trouver dans Google à partir d'une recherche par mots-clés. Ainsi, une nouvelle page liée par quelques pages à PageRank 5 ou 6 est détectée par Google en 12h, et ajoutée dans l'index en 24h !

La "prime de fraîcheur"

Vient ensuite une période faste pour cette nouvelle page : dans les premiers jours qui suivent son apparition sur Google, la page bénéficie d'une "prime de fraîcheur". A cet instant précis, cette page n'est passée que dans la première moitié de l'algorithme de Google, à savoir son indexation. Tous les mots ont été épluchés, les balises HTML décortiquées. Par contre Google n'a pas encore analysé la structure de liens vers et à partir de cette page. Cette page n'a donc pas encore de PageRank, même si la barre d'outils Google peut en indiquer un (à ce moment-là ce n'est qu'une estimation). Notez que dans le cas d'un nouveau site, la Toolbar reste bien grise et indique "La page affichée n'est pas indexée dans Google".
Grâce à cette "prime de fraîcheur", cette page a des chances de sortir en meilleure position que d'autres pages présentes dans Google depuis longtemps (et ayant un PageRank). Même si cette idée peut paraître étonnante, elle présente l'avantage de mettre en avant rapidement des pages d'actualité, puis de les retirer pour revenir à l'algorithme classique.

Les meilleures choses ayant malheureusement toujours une fin, il est fréquent de voir disparaître cette page de Google, surtout si elle ne bénéficiait pas de nombreux liens (ou de liens issus de pages à faible PageRank). Il ne faut pas s'inquiéter, elle reviendra !