“Hay que optimizar el crawl budget” es la frase que más rápido identifica a alguien que copió un playbook de un marketplace de 2 millones de SKU y lo pegó en una agencia de Cusco. Google rastrea lo que le merece la pena. En un sitio de 200-500 URLs bien enlazadas, casi siempre entra. El cuello de botella no es el presupuesto. Es que la URL es duplicada, delgada, bloqueada, lenta, o no existe en el idioma del usuario.
Google documenta crawl budget para sitios grandes. La regla práctica que uso: por debajo de ~10.000 URLs indexables, no abro esa conversación salvo que GSC muestre que Googlebot se está ahogando (5xx, TTFB miserable, laberintos de parámetros).
Dónde sí se malgasta el rastreo, aunque seas chico
- Parámetros y facetas.
?order=price×?ref=ig× paginación. Unas decenas de tours se vuelven miles de URLs si el constructor las enlaza. Ahí el budget, aunque pequeño, se va en basura. - Duplicados en sitemap. Dos slugs del mismo bike tour. Google rastrea los dos, elige uno, el otro comió una visita.
- Cadena de redirección.
http://dominio→https://dominio→https://www.dominio. Dos hops. Cada hop es trabajo. Consolida. - Servidor lento. Un idioma cerca de un segundo y el hermano en décimas, mismo grupo: Google reduce el ritmo para no romperte. Eso sí es presupuesto, y se arregla con caché, no con un plugin de “crawl optimizer”.
Teatro de budget
Trabajo real
Qué mirar en GSC en vez de pronunciar la palabra
Estadísticas de rastreo: peticiones por día, tiempo de respuesta, códigos. Si un idioma responde varias veces más lento que otro, el gráfico ya te dijo el problema. Si las peticiones son pocas decenas al día en un catálogo chico, Google está sobrando. No lo “optimices” a la mitad.
Indexación: si 40 URLs están en “rastreada, sin indexar”, no es budget: es calidad (el artículo siguiente). Si están en “descubierta, sin indexar”, es arquitectura o prioridad, no un número mágico de URLs por día.
Cuándo sí hablas de budget
- Multitud de parámetros indexables.
- Un WP que genera 8.000 tags de “guía cusco 2024”.
- Facetas de un motor de hoteles (si algún día los hay).
- Logs que muestran a Googlebot atascado en calendarios infinitos de “salida el 12 de marzo, 13 de marzo…”.
Hasta entonces, la frase útil en la reunión es:
No tenemos un problema de presupuesto de rastreo. Tenemos un catálogo en inglés y casi nada de blog. Google puede rastrearlo. El problema es qué encuentra cuando entra, y en qué idioma se lo sirve al brasileño.
Eso es senior. “Hay que ahorrar crawl budget” en un sitio que cabe en una hoja de cálculo es disfraz.