Qu’est-ce qui peut causer une baisse considérable des statistiques de navigation ?

Vous constatez une baisse du taux d'exploration de votre site ? Vous vous demandez ce qui a pu causer cette baisse et ce que vous pouvez faire pour y remédier ? Lisez ce que John Mueller a à dire.
Marie Aquino
February 23, 2022

Lors des Google SEO Office Hours du 18 février dernier, un utilisateur a signalé que ses statistiques d’exploration ont connu une baisse considérable, passant de 700 par jour à seulement 50 par jour. Il a ensuite demandé s’il était possible de comprendre, à partir du rapport de la console de recherche, ce qui avait pu causer une telle baisse du taux d’exploration.

Selon John Mueller, plusieurs facteurs entrent en ligne de compte dans la quantité de crawl qu’ils effectuent. D’une part, ils essaient de déterminer la quantité d’informations qu’ils doivent crawler à partir d’un site Web pour que les résultats de recherche restent frais et utiles, et cela repose sur la compréhension de la qualité du site et de la façon dont les choses changent sur le site. C’est ce qu’on appelle la demande d’exploration.

D’autre part, il existe également des limitations du côté du serveur du site, de l’infrastructure du réseau, en ce qui concerne la quantité de contenu que Google peut explorer sur le site Web. Ils essaient également d’équilibrer ces éléments.

Les restrictions sont généralement liées à deux éléments principaux : le temps de réponse global aux requêtes adressées au site Web et le nombre d’erreurs, en particulier les erreurs de serveur rencontrées lors de l’exploration.

Si Google constate un grand nombre d’erreurs de serveur, il ralentira l’exploration car il ne veut pas causer davantage de problèmes s’il constate que le serveur devient plus lent. Il ralentira également le crawling parce qu’il ne veut pas causer de problèmes avec son crawling.

Ce sont les deux principaux facteurs qui entrent en jeu.

En ce qui concerne la vitesse, Google l’évalue de deux manières différentes, ce qui peut parfois prêter à confusion lorsqu’on examine le taux d’exploration.

Pour ce qui est du taux d’exploration, il s’agit de la vitesse à laquelle une url peut être demandée au serveur.

Un autre aspect de la vitesse que vous pouvez probablement rencontrer concerne les vitales du web et la vitesse de chargement d’une page dans un navigateur. La vitesse de chargement d’une page dans un navigateur n’est généralement pas directement liée à la vitesse de récupération d’une url individuelle par les robots d’exploration.

En effet, dans un navigateur, il faut traiter le Javascript, extraire tous les fichiers externes, rendre le contenu, etc., et tout cela prend un temps différent de celui nécessaire pour récupérer l’URL pour un crawler.

C’est une chose à laquelle il faut faire attention si vous essayez de diagnostiquer un changement dans le taux d’exploration – ne regardez pas le temps qu’il faut pour rendre une page, mais plutôt le temps qu’il faut pour aller chercher l’url sur le serveur.

Une autre chose qui entre en jeu de temps en temps, en fonction de votre site, est que Google essaie de comprendre où le site Web est réellement hébergé, en ce sens que s’il constate que le site Web change d’hôte d’un serveur à un autre, change de fournisseur d’hébergement, change de cdns, change de cdns, le système de Google reviendra automatiquement à un taux d’exploration sûr où il sait qu’il ne va pas causer de problèmes.

Cela signifie que chaque fois qu’il y a un changement important dans l’hébergement d’un site, le taux d’exploration baisse, puis se normalise dans les deux semaines suivantes.

Par ailleurs, de temps à autre, afin que les algorithmes puissent déterminer comment classer les sites Web et les serveurs, ils peuvent également mettre à jour le taux d’exploration. Il peut certainement arriver qu’à un moment donné, même si aucun changement n’a été apporté à l’infrastructure d’hébergement, les algorithmes essaient de comprendre les choses et de faire des ajustements.

Une chose que l’on peut faire dans Search Console est de spécifier un taux d’exploration. La définition d’un taux d’exploration aide Google à comprendre que vous avez des paramètres spécifiques pour votre site Web et il essaiera d’en tenir compte.

La difficulté avec les paramètres de taux d’exploration, cependant, est qu’il s’agit d’un paramètre maximum. Cela ne signifie pas qu’ils doivent ramper autant que le taux de rampement défini, mais plutôt qu’ils doivent ramper au maximum jusqu’à ce qui a été spécifié. Cela signifie que ce paramètre est plus utile lorsque vous devez réduire le taux d’exploration, et pas vraiment lorsque vous souhaitez l’augmenter.

Si le problème du taux d’exploration persiste, la dernière chose à faire est de signaler les problèmes au robot Google dans le centre d’aide de la console de recherche. Si vous constatez que le taux d’exploration de votre site est très éloigné de ce que vous attendez, vous pouvez signaler les problèmes au robot Google. Il vous suffit de spécifier les adresses IP du robot Google lorsqu’il tente d’explorer votre page et de fournir quelques informations sur le type de problème rencontré.

Les rapports sont transmis à l’équipe d’ingénieurs qui travaille sur le robot Google et qui les examine afin de déterminer les modifications à apporter de leur côté pour améliorer l’exploration.

Dans la plupart des cas, vous n’obtiendrez probablement pas de réponse à votre demande, mais l’équipe les lira et essaiera de déterminer s’il s’agit d’un problème spécifique au site ou d’une amélioration globale du système.

Des informations utiles sur les facteurs qui entrent en jeu lorsqu’il s’agit de crawling. Nous espérons que les réponses de Mueller ont apporté des réponses sur ce qui pourrait avoir causé les baisses que vous avez rencontrées, et ce qui pourrait être fait.

Consultez l’épisode SEO Office Hours à l’adresse suivante