Derniers Articles
YouTube va compter les vues dès la première seconde à partir du 24 août ChatGPT Ads arrive en Europe : la publicité s’invite dans vos conversations avec l’IA Une offre d’emploi de Google confirme ce qu’on observe dans Discover Combien coûte vraiment un projet e-commerce B2B ? Ce qu’il faut budgéter en 2026 Étude Ahrefs : un mois après leur lancement en France, les AI Overviews font déjà chuter le CTR de 23 % L’édition d’août 2026 de Réacteur est en ligne ! Google Spam Update d’août 2026 : nouvelle mise à jour anti-spam Goossips SEO : Hreflang & Indexation ChatGPT peut visiter vos pages interdites, et OpenAI l’assume Microsoft Clarity : nouvel indicateur pour mesurer si le scraping des IA vous rapporte du traficLire l'article complet : Nouveau rapport robots.txt dans la Google Search Console
Publié le 17/11/2023 à 15:36:44 par Neper
Nouveau rapport robots.txt dans la Google Search Console
Nouvelle fonctionnalité dans les paramètres de la GSC : dorénavant les webmasters pourront mieux comprendre et gérer l’indexation de leurs sites. Mais Google supprime dans un mois l’outil de test du fichier robots.txt …
Nouveau rapport disponible
Ce nouvel outil indique les fichiers robots.txt trouvés par Google pour les 20 principaux hôtes de votre site, la dernière fois qu’ils ont été explorés et les éventuels avertissements ou erreurs rencontrés.
L’annonce a été faite le 15 novembre sur le compte X de la GSC :
Ce nouveau rapport est disponible dans le monde entier, vous pouvez donc tout de suite aller le consulter via votre compte Google Search Console. Il vous suffit de vous rendre dans les paramètres dans la colonne de gauche et de cliquer sur « Ouvrir le rapport » ? Dès cette première étape vous pouvez savoir si votre robots.txt est valide ou si des « erreurs critiques » sont présentes.
Ce qui est intéressant ensuite, c’est de cliquer sur vos différents robots. Car même dans le cas ou votre robots.txt est valide et récupéré, il peut exister différents avertissements. C’est-à-dire les règles que Googlebot ignore malgré le fait qu’elles soient inscrites dans votre robots.txt.
Une bonne occasion de vous repartager le lien la page Help Center concernant le robots.txt : https://support.google.com/webmasters/answer/6062598
Suppression de l’ancien testeur Robots.txt
Souvent quand quelque chose apparait, malheureusement (ou heureusement cela est très personnel) quelque chose disparait.
Par conséquent dès le 12 décembre 2023, l’outil de test du fichier robots.txt va être supprimé ! Vous n’y aurez plus accès. Pour rappel, ce testeur permettait de savoir si le fichier robots.txt empêchait les robots.txt d’explorer des urls spécifiques.
