Matthew Prince

Le PDG de Cloudflare Matthew Prince a rencontré le 21 octobre 2025 l'autorité britannique de la concurrence, la Competition and Markets Authority, pour plaider la séparation des robots d'indexation de recherche et d'IA de Google. Il soutient que Google utilise le même crawler, Googlebot, pour la recherche et pour alimenter ses systèmes d'IA, ce qui lui donne un accès gratuit à un contenu que des concurrents comme Anthropic, OpenAI et Perplexity doivent payer. Selon Prince, bloquer le crawler de Google désactive aussi son équipe de sécurité publicitaire, rendant le refus économiquement intenable pour les médias, qui perdraient environ 20 % de leurs revenus sans accès à la recherche. La CMA venait de désigner Google comme acteur à statut de marché stratégique. Prince a rappelé que Cloudflare n'est pas une entreprise d'IA mais le réseau intermédiaire de 80 % des sociétés d'IA.

Cloudflare a présenté le 24 septembre 2025 sa Content Signals Policy, un ajout gratuit à son service de robots.txt géré, déjà déployé sur 3,8 millions de domaines. Le dispositif introduit des directives lisibles par machine permettant aux propriétaires de sites de signaler trois usages distincts de leur contenu : search (indexation pour la recherche, excluant les résumés générés par IA), ai-input (utilisation en temps réel dans des réponses génératives) et ai-train (entraînement de modèles). Chaque signal prend la valeur yes, no ou aucune préférence. La politique s'applique aux sites, API, serveurs MCP et services connectés. Matthew Prince a déclaré que l'Internet ne peut pas attendre une solution pendant que le contenu original des créateurs est exploité pour le profit d'autres entreprises. La News/Media Alliance et Stack Overflow ont soutenu l'initiative.

Cloudflare a annoncé le 1er juillet 2025 devenir le premier fournisseur d'infrastructure Internet à bloquer par défaut les robots d'indexation des IA sur les nouveaux domaines, sauf autorisation explicite du propriétaire du site. L'entreprise, qui gère le trafic d'environ 20 % du web et traite des milliers de milliards de requêtes par jour, fait passer le modèle d'un opt-out à un opt-in. Les robots doivent désormais s'authentifier et déclarer leur finalité : entraînement, inférence ou recherche. En parallèle, Cloudflare a ouvert la bêta privée de Pay per Crawl, qui permet aux éditeurs de facturer chaque accès via le code HTTP 402 Payment Required. Plus d'un million de clients avaient déjà choisi de bloquer ces robots. Le PDG Matthew Prince a déclaré que le contenu original est essentiel et que les créateurs doivent pouvoir continuer à le produire.