Cloudflare ajoute une Content Signals Policy au robots.txt pour distinguer recherche, entrée IA et entraînement IA sur 3,8 millions de domaines
Cloudflare a présenté le 24 septembre 2025 sa Content Signals Policy, un ajout gratuit à son service de robots.txt géré, déjà déployé sur 3,8 millions de domaines. Le dispositif introduit des directives lisibles par machine permettant aux propriétaires de sites de signaler trois usages distincts de leur contenu : search (indexation pour la recherche, excluant les résumés générés par IA), ai-input (utilisation en temps réel dans des réponses génératives) et ai-train (entraînement de modèles). Chaque signal prend la valeur yes, no ou aucune préférence. La politique s'applique aux sites, API, serveurs MCP et services connectés. Matthew Prince a déclaré que l'Internet ne peut pas attendre une solution pendant que le contenu original des créateurs est exploité pour le profit d'autres entreprises. La News/Media Alliance et Stack Overflow ont soutenu l'initiative.
