El període en què les intel·ligències artificials podien recollir lliurement informació de tot internet sense restriccions està arribant al seu final, principalment per les noves mesures de Cloudflare, una de les empreses que gestiona el trànsit d’un 20% de la web mundial. Ara, les empreses que desenvolupen IA hauran de demanar permís explícit abans de poder extreure dades de qualsevol web protegida per Cloudflare. Quan un lloc web es registra, pot decidir si vol permetre o no l’accés als bots d’IA, amb aquesta opció activada per defecte cap al control i la privacitat.

A més, Cloudflare ha creat un nou mercat anomenat **Pay per Crawl**, on els propietaris de webs podran cobrar petites quantitats cada vegada que un bot d’IA accedeixi a les seves dades, o bé permetre l’accés gratuït o bloquejar-lo completament. Aquest sistema pretén donar més control i possibilitar que els creadors de contingut rebin una compensació econòmica per l’ús de les seves dades per part de les IA, tot i que la seva viabilitat dependrà que editors i empreses d’IA hi participin activament.

Aquest canvi pot ajudar a protegir els interessos dels editors i a evitar que tot el contingut d’internet acabi darrere de murs de pagament, proposant un model més sostenible per a la web oberta.