Derniers Articles
Une offre d’emploi de Google confirme ce qu’on observe dans Discover Combien coûte vraiment un projet e-commerce B2B ? Ce qu’il faut budgéter en 2026 Étude Ahrefs : un mois après leur lancement en France, les AI Overviews font déjà chuter le CTR de 23 % L’édition d’août 2026 de Réacteur est en ligne ! Google Spam Update d’août 2026 : nouvelle mise à jour anti-spam Goossips SEO : Hreflang & Indexation ChatGPT peut visiter vos pages interdites, et OpenAI l’assume Microsoft Clarity : nouvel indicateur pour mesurer si le scraping des IA vous rapporte du trafic Cloudflare veut donner un portefeuille aux agents IA pour leur permettre de payer sur le web Search Console, CMS, API : pourquoi les accès sont le vrai point faible de vos projets SEO ?Lire l'article complet : Vers la fin du robots.txt ?
Publié le 21/09/2023 à 14:56:11 par Neper
Vers la fin du robots.txt ?
Un post de Danielle Romain, la VP Trust de Google publié fin août sur le blog The Keyword est passé un peu inaperçu. Mais si Google arrive à ses fins, cela signifie qu’un monument du World Wide Web est appelé à disparaître bientôt : le fichier robots.txt.
La mission de Danielle Romain est de diriger une équipe chargée de collaborer avec les équipes produits grand public de Google et d’autres partenaires sur des solutions visant à améliorer la confidentialité et la confiance des utilisateurs.
Et que reproche Mme Romain au robots.txt ?
Et bien tout simplement de ne pas être une solution adaptée pour contrôler l’accès aux contenus d’un site web lorsqu’il s’agit d’entrainer une IA et pas seulement de définir quels contenus un bot de moteur de recherche a le droit de télécharger.
Nous pensons qu’il est temps pour les communautés du Web et de l’IA d’explorer des moyens supplémentaires lisibles par machine pour le choix et le contrôle des éditeurs Web pour les cas d’utilisation émergents de l’IA et de la recherche.
Danielle Romain, VP Trust, Google
Est-ce que Google propose une autre alternative concrète au Robots.txt ? Non, pas encore : pour le moment ils lancent une consultation pour recueillir les réactions et les propositions de différents acteurs. Et c’est seulement dans un deuxième temps qu’ils proposeront une solution alternative.
Vous pouvez vous inscrire pour participer aux échanges et avoir accès aux discussions ici :
https://services.google.com/fb/forms/ai-web-publisher-controls-external/
Le post de Danielle Romain sur The Keyword :
https://blog.google/technology/ai/ai-web-publisher-controls-sign-up/
L’article Vers la fin du robots.txt ? est apparu en premier sur Neper.