Discovery Crawl et Refresh Crawl : Deux méthodes d’exploration des sites par Google

Vous êtes-vous déjà demandé comment Google explore un site et à quelle fréquence il le fait ? Les réponses de John Mueller donnent un aperçu des deux façons dont Google explore un site ou une page.
Marie Aquino
January 12, 2022

Lors du hangout Google SEO Office Hours du 7 janvier dernier, John Mueller a été interrogé sur le crawling d’un site et sur le fait que le propriétaire du site a remarqué que lorsqu’il publiait du contenu régulièrement, son site était crawlé quotidiennement, mais que lorsqu’il publiait moins souvent, le crawling devenait également moins fréquent.

Mueller a confirmé que de tels cas pouvaient se produire et qu’il ne s’agit pas tant de l’exploration d’un site Web que de celle des pages individuelles d’un site.

En ce qui concerne l’exploration, il existe en gros deux types d’exploration : l’exploration de découverte, qui consiste à essayer de découvrir de nouvelles pages sur un site, et l’exploration de rafraîchissement, qui consiste à mettre à jour les pages existantes dont ils ont déjà connaissance.

Dans la plupart des cas, ils rafraîchissent la page d’accueil, par exemple, une fois par jour ou toutes les deux heures, et s’ils trouvent de nouveaux liens sur la page d’accueil, ils vont alors explorer ces nouvelles pages avec l’exploration de découverte.

De ce fait, vous verrez un mélange de découverte et de rafraîchissement lors de l’exploration, et vous verrez une certaine base d’exploration se produire chaque jour.

Mais s’ils reconnaissent que les pages individuelles changent très rarement, ils se rendent compte qu’ils n’ont pas besoin de les explorer en permanence.

Par exemple, s’il donne l’exemple d’un site d’actualités qui est mis à jour toutes les heures, ils apprendront qu’ils doivent le crawler toutes les heures. Si le site d’actualités n’est mis à jour qu’une fois par mois, ils apprendront qu’ils n’ont pas besoin de l’explorer toutes les heures.

Il a également précisé qu’il ne s’agit pas d’un signe de qualité ou d’un signe de classement, mais d’un point de vue purement technique.

D’après sa réponse, il semble que la fréquence de publication du contenu ait un lien avec la fréquence d’exploration d’un site ou d’une page, et d’après sa réponse, le fait d’avoir du contenu frais sur la page d’accueil peut aider à accélérer la découverte du site, du moins c’est ce que je suppose d’après ses réponses.

Cependant, la fréquence d’exploration d’un site n’a pas de corrélation directe avec la qualité et le classement et est purement technique, comme il l’a mentionné.

La question qui se pose maintenant est la suivante : comment allez-vous tirer parti de ces informations pour améliorer le classement de vos pages ?