Derniers événements

Plus de vidéos
Fil d'actualités / Cloudflare lance « Pay per Crawl » pour facturer les IA qui crawlent vos contenus

Publié le 07/07/2025 à 06:30:00 par Abondance

Cloudflare lance « Pay per Crawl » pour facturer les IA qui crawlent vos contenus

Cloudflare, qui sécurise 20% du web, lance "Pay per Crawl" afin de faire payer les crawlers des IA pour accéder aux contenus qui les alimentent. Un changement majeur pour l'économie des IA et une réponse directe aux critiques des éditeurs et créateurs de contenu. On découvre.

Ce qu'il faut retenir :

  • Cloudflare veut faire payer l'exploration des sites internet par les crawlers des IA afin de redistribuer la valeur aux éditeurs qui alimentent OpenAI, Anthropic et consorts.
  • Accessible pour le moment en bêta privée, l'initiative ambitieuse entend évoluer au fil des demandes d'accès par les éditeurs de sites et éditeurs d'IA.

Cet article au format audio 🔉

Le constat de Cloudflare : plus d'utilisateurs, moins de trafic

En 10 ans, nous sommes passés de 4 à 6 milliards d’utilisateurs d’Internet. Intuitivement, on pourrait croire que plus de monde en ligne signifie plus de trafic pour les éditeurs. Pourtant, les chiffres racontent une autre histoire :

  • Il y a 10 ans :
    • Google envoyait 1 visiteur pour 2 pages crawlées.
  • Il y a 6 mois :
    • Google envoyait 1 visiteur pour 6 pages crawlées
    • OpenAI envoyait 1 visiteur pour 250 pages crawlées
    • Anthropic envoyait 1 visiteur pour 6000 pages crawlées.
  • Aujourd'hui :
    • Google envoie 1 visiteur pour 18 pages crawlées,
    • OpenAI envoie 1 visiteur pour 1500 pages crawlées,
    • Anthropic envoie 1 visiteur pour 60000 pages crawlées.

Pour Matthew Prince (PDF de Cloudflare), le web court à sa perte si les créateurs ne sont plus incités à publier. En cause : l’extraction massive de contenus par les IA, sans contrepartie ni limitation. Au-delà du business, l’enjeu est aussi la souveraineté : qui contrôle la diffusion des savoirs à l’ère de l’IA ? Face à ChatGPT, Gemini ou Claude, de plus en plus d’éditeurs refusent de se faire aspirer sans compensation. Des acteurs comme The Atlantic, TIME ou BuzzFeed ont déjà adopté un blocage par défaut, signe d’une mutation en cours.

Cloudflare lance "Pay Per Crawl"

Jusqu'à présent, les créateurs de contenu avaient le choix entre laisser leur porte grande ouverte ou construire des murs pour se protéger. Mais Cloudflare propose une troisième voie : faire payer l’accès aux robots IA.

Cloudflare propose ainsi aux propriétaires de sites de :

  • Autoriser : garantir l'accès gratuit des contenus aux crawlers.
  • Faire payer : exiger un paiement au prix configuré pour le domaine.
  • Bloquer : Interdire totalement l'accès au contenu, sans possibilité de paiement.

Si le bot ne présente pas de preuve de paiement, il reçoit un code HTTP 402 “Payment Required” accompagné du tarif exigé. S’il accepte, le contenu est servi. Sinon, il passe son chemin. Cette approche vise à redonner la main aux créateurs, qui jusqu’ici subissaient le scraping massif sans compensation.