Google supprime l’outil de limitation de vitesse de crawl dans Google Search Console
Google a récemment annoncé qu’il supprimerait l’outil de limitation de vitesse de crawl dans Google Search Console à partir du 8 janvier 2024. Cette décision a été prise suite aux améliorations apportées par Google à sa logique de crawl et à d’autres outils disponibles pour les éditeurs. Voici ce qu’il faut retenir de cette annonce.
Contexte de la suppression
L’outil de limitation de vitesse de crawl était disponible depuis plus de 10 ans dans Google Search Console. Il permettait aux éditeurs de demander à Google de réduire la vitesse de crawl de leur site. Cela était particulièrement utile pour les sites ayant des problèmes de disponibilité. Cependant, l’effet de cet outil ne durait que 90 jours. Google a décidé de supprimer cet outil en raison des améliorations apportées à sa logique de crawl, qui lui permet d’ajuster automatiquement la vitesse de crawl en fonction des réponses du serveur.
Fonctionnement et limites de l’outil
L’outil de limitation de vitesse de crawl avait ses limites. Il pouvait prendre plus d’un jour pour appliquer de nouvelles limites et était rarement utilisé par les propriétaires de sites. De plus, ceux qui l’utilisaient réglaient souvent la vitesse de crawl au minimum. Google déconseillait d’ailleurs de limiter manuellement la vitesse de crawl, sauf en cas de problèmes de charge du serveur causés par Googlebot. Étant donné que Google est désormais capable d’ajuster automatiquement la vitesse de crawl en fonction des réponses du serveur, l’outil de limitation de vitesse de crawl est devenu obsolète.
Conséquences pour les propriétaires de sites
Les propriétaires de sites qui utilisaient cet outil devront désormais compter sur la logique de crawl automatique de Google. En cas de crawl inhabituellement lourd que le site ne peut pas gérer seul, Google recommande de se référer à la page d’aide expliquant comment réduire la vitesse d’exploration de Googlebot. Cependant, il est important de noter que selon cette page d’aide, il est toujours « recommandé » de réduire la vitesse de crawl via la Search Console, ce qui soulève des interrogations quant à la décision de suppression de Google. En cas de problèmes de crawl, les éditeurs peuvent toujours utiliser le formulaire de rapport Googlebot pour signaler des activités inhabituelles.