En mis años trabajando como consultor SEO, he visto demasiadas auditorías que fallan por un error conceptual básico: asumir que, porque una página está en el sitemap, Google la está visitando. Necesitas entender que existe una brecha clara entre la rastreabilidad web y el rastreo efectivo.
Capacidad frente a realidad
La rastreabilidad web es el potencial de tu sitio. Es la capacidad técnica que tiene una URL para ser descubierta y procesada. Esto depende de factores que tú controlas directamente: que no esté bloqueada en el robots.txt, que no tenga etiquetas nofollow impidiendo el paso a los bots, o que no requiera un login privado. Cuando usas herramientas como Screaming Frog, lo que ves es precisamente eso: un mapa de las puertas abiertas que tiene Google.
Sin embargo, el rastreo efectivo es otra historia muy distinta. Es lo que realmente sucede en los servidores de Google. Una página puede ser perfectamente rastreable, pero si Google decide que no merece la pena gastar sus recursos en ella, no la visitará. He visto proyectos con una arquitectura impecable que, en la práctica, apenas recibían visitas de Googlebot porque la prioridad del buscador estaba en otro lado.
 (1).jpg)
Cómo medir lo que realmente importa
Para salir de dudas, no mires solo tu crawler. Lo que mejor me ha funcionado con clientes es cruzar los datos de tu herramienta de rastreo con los logs del servidor y la información de Google Search Console. Los logs no mienten: te dicen exactamente cuándo, desde qué IP y con qué código de respuesta ha entrado el bot.
Screaming Frog es excelente para auditar la rastreabilidad web, pero el rastreo efectivo se comprueba en el terreno de juego. Si tus logs muestran que el bot está atrapado en parámetros innecesarios o perdiendo tiempo en redirecciones, tu problema no es técnico, es de gestión de recursos. Mi consejo es que siempre valides la actividad real del bot antes de cambiar tu estrategia de enlazado o tus directivas en el archivo robots.txt.
Preguntas frecuentes
¿Cómo puedo ver si mi web tiene un buen rastreo efectivo?
Debes analizar los ficheros logs de tu servidor o consultar la sección de estadísticas de rastreo en Google Search Console para ver la actividad real del bot.
¿Por qué mi web es rastreable pero no aparece indexada?
La rastreabilidad es solo el primer paso. Si la página es rastreable pero no se indexa, el problema puede estar en la calidad del contenido, directivas noindex o que Google no considera la página relevante.
¿Screaming Frog me dice lo mismo que Google?
No exactamente. Screaming Frog te muestra la capacidad técnica de la web, mientras que Google decide qué rastrear basándose en su propia capacidad y prioridades.