Pay Per Crawl: ¿deberías cobrar a los bots de IA por leer tu web?
La mitad del tráfico de tu web puede ser bots de IA. Qué es Pay Per Crawl de Cloudflare, cuánto podrías ganar y por qué una pyme quizá no debería cobrar.
Sábado por la mañana, café en mano, abro el panel de Cloudflare de nuestra propia web. Primera cifra: 84 visitantes únicos en las últimas 24 horas. No está mal para una web de pocos meses, pienso. Segunda cifra: un pico de tráfico enorme a las cuatro de la tarde. ¿Un artículo que se ha hecho viral? ¿Alguien importante compartiendo nuestra web?
Miro el desglose por países: Canadá, 248 peticiones. Polonia, 140. Estados Unidos, 122. ¿España? Ni aparece en el top 5.
Somos una consultora de IA de Cataluña que publica en español y catalán. Nadie nos estaba leyendo desde Toronto a las cuatro de la tarde. El pico era un bot. Y no era el único: al cruzar los datos con la analítica de personas reales, la inmensa mayoría de aquellas 654 peticiones del día no venían de humanos. Venían de máquinas.
La primera reacción es incómoda: «me están leyendo la web gratis para entrenar sus modelos». La segunda es la pregunta del millón: ¿y si les cobro la entrada?
Resulta que se puede. Y antes de decidir si hacerlo, hicimos números con nuestros propios datos. Este artículo es el resultado.
Quién te está visitando en realidad
Cuando miras el tráfico “en crudo” de cualquier web, hay tres poblaciones mezcladas:
- Personas. Las que te interesan. En una web joven, muchas menos de las que dice el contador total.
- Bots clásicos. Googlebot y compañía (te indexan, bienvenidos sean), monitores de uptime, y scrapers anónimos que copian contenido sin identificarse. Nuestro visitante canadiense de las cuatro de la tarde era de esta última familia.
- Crawlers de IA. La especie nueva: GPTBot (OpenAI), ClaudeBot (Anthropic), PerplexityBot, Google-Extended… Leen tu web para entrenar modelos o para responder preguntas de sus usuarios citando fuentes.
Esa tercera población es la que ha cambiado las reglas. Porque por primera vez hay empresas gigantes cuyo producto se alimenta, en parte, de tu contenido. Y de ahí nace la idea de cobrarles.
Pay Per Crawl: el peaje para bots de IA
Pay Per Crawl es una función de Cloudflare que convierte tu web en una autopista de peaje para crawlers de IA. Funciona con una pieza de la web que llevaba décadas dormida: el código HTTP 402, Payment Required.
El mecanismo, simplificado:
- Tú defines un precio por petición para tu web.
- Cuando un crawler de IA registrado pide una página, o paga el precio o recibe un 402 y se queda fuera.
- Cloudflare hace de intermediario y te liquida los cobros.
Tres cosas que conviene saber antes de ilusionarse:
- Está en beta privada con lista de espera. No es un botón que puedas activar hoy mismo en tu panel; te apuntas y esperas invitación.
- Solo aplica a crawlers que juegan. Los grandes de la IA pueden registrarse y pagar. El scraper anónimo de Canadá no va a pasar por caja jamás: a ese solo puedes bloquearlo.
- El modelo acaba de girar. El 1 de julio de 2026 Cloudflare anunció la evolución hacia pay per use: en lugar de cobrar cada descarga, la idea es que cobres cuando tu contenido se usa de verdad en una respuesta de IA. Stack Overflow ya trabaja con este modelo. Es un cambio importante: paga el uso, no la visita.
Las cuentas sin humo
Aquí es donde la mayoría de artículos sobre el tema se ponen épicos y hablan de “monetizar tu contenido en la era de la IA”. Nosotros preferimos enseñarte la calculadora.
Nuestro caso real: unas 650 peticiones diarias en total. De esas, la parte que corresponde a crawlers de IA registrados —los únicos que podrían llegar a pagar— es una fracción pequeña. Pongamos que fueran 100 peticiones al día, siendo muy generosos. Cloudflare no publica tarifas (el precio lo fijas tú), pero en este mercado se habla de fracciones de céntimo o céntimos por petición. La cuenta sale sola: céntimos al día. Al mes, no da ni para un café con leche.
¿Significa eso que Pay Per Crawl es humo? No. Significa que es una herramienta para un perfil concreto de web:
| Perfil de web | ¿Le compensa cobrar a los bots? |
|---|---|
| Medio de comunicación, base de datos, investigación original a gran escala | Sí. Su contenido ES el producto, y el volumen de crawls multiplica los céntimos |
| Plataforma con contenido único generado por usuarios (foros, reseñas) | Probablemente. Es exactamente el caso de Stack Overflow |
| Pyme de servicios que usa su web como escaparate | Casi nunca. Y además hay un coste oculto que nadie te cuenta |
El coste oculto: cobrar es desaparecer
Piensa en cómo busca la gente últimamente. Cada vez más clientes potenciales no abren Google: le preguntan a ChatGPT, a Claude o a Perplexity. «¿Qué consultora de IA me recomiendas cerca de Barcelona?» es una pregunta que ya se hace, literalmente, a una máquina.
¿Y de dónde saca la máquina su respuesta? De las webs que sus crawlers han podido leer.
Si les cobras la entrada —o directamente los bloqueas—, el resultado práctico para una web pequeña es que dejan de leerte, dejan de citarte y dejas de existir en ese canal. Habrás ganado unos céntimos de peaje a cambio de borrarte del escaparate donde tus futuros clientes empiezan a preguntar.
Para un periódico, ese intercambio puede tener sentido: su negocio es el contenido, no ser encontrado. Para una pyme que vende servicios, cada crawl de un bot de IA es un comercial silencioso trabajando gratis. Cobrarle la visita es matar al comercial por calderilla.
A esto se le empieza a llamar GEO (Generative Engine Optimization): igual que el SEO optimizaba para salir en Google, el GEO optimiza para que los modelos de IA te entiendan y te citen. Y la primera regla del GEO es obvia: que puedan leerte.
Qué hemos hecho nosotros (y puedes copiar en una tarde)
Después de hacer estos números con nuestra propia web, esta fue nuestra decisión, por si te sirve de plantilla:
- Dejar pasar a los crawlers de IA, a propósito. En Cloudflare (sección AI Crawl Control) se puede elegir bloquearlos o permitirlos. Nosotros los permitimos: hoy nos aportan más como canal de visibilidad que como fuente de céntimos.
- Ponerles un menú:
llms.txt. Es una convención emergente (no un estándar oficial): un fichero de texto en la raíz de tu web que resume quién eres y qué páginas importan, pensado para que un modelo de IA lo lea y te cite bien. El nuestro está publicado en agentiko.es/llms.txt en español, catalán e inglés — míralo y copia la estructura si quieres. Se hace en 20 minutos. - Apuntarnos a la lista de espera de Pay Per Crawl. Es gratis y no compromete a nada. Si el modelo pay per use madura —cobrar cuando te citan, sin dejar de ser visible—, queremos tener la opción abierta.
- Y lo siguiente en nuestra lista: echar a los bots basura. Los scrapers anónimos tipo “pico de las cuatro de la tarde” ni pagan ni aportan. Para esos, Cloudflare tiene Bot Fight Mode, gratuito, un interruptor.
Fíjate en el matiz: no es “bots sí o bots no”. Es alfombra roja para los que te dan visibilidad, peaje futuro para cuando tenga sentido, y puerta para los parásitos.
¿Entonces, cobro o no cobro?
La chuleta final, sin humo:
| Tu situación | Nuestra recomendación |
|---|---|
| Vives de contenido único (noticias, datos, investigación) y tienes volumen | Apúntate a Pay Per Crawl y estudia precios: es tu activo |
| Vendes servicios o productos y la web es tu escaparate | No cobres. Optimiza para que la IA te lea y te cite (GEO, llms.txt) |
| Te preocupa que entrenen modelos con tu contenido | Puedes bloquear solo el entrenamiento y permitir búsqueda/citación: son controles separados |
| Tienes tráfico de scrapers anónimos | Eso no se cobra: se bloquea |
La pregunta correcta no es «¿puedo cobrar a los bots?» — poder, puedes. Es «¿qué me renta más: sus céntimos o su escaparate?». Para la mayoría de pymes, hoy, la respuesta honesta es el escaparate.
Y una última cosa: nada de esto es teoría. Todo lo de este artículo sale de mirar el panel de nuestra propia web un sábado por la mañana. Si quieres saber qué ven los bots de IA cuando visitan la tuya —y si te están citando o ignorando—, lo miramos juntos con los pies en la tierra.