¿Alguna vez has intentado rastrear una web con Screaming Frog y te has quedado atascado en la home?
Si la respuesta es sí, es probable que el sitio tenga configuradas las etiquetas noindex y/o nofollow, lo que impide que la herramienta explore más allá de la página principal.
En este artículo te enseño cómo activar una configuración clave en Screaming Frog que te permitirá rastrear todas las URLs internas, incluso cuando están marcadas como «nofollow».
El problema: solo se rastrea la home
Vamos a partir del caso real de una web de ejemplo: Ascensores Ciasur. Al intentar rastrearla con la configuración por defecto, Screaming Frog solo detecta la home, junto con sus recursos estáticos (CSS, imágenes, etc.).
En el apartado HTML, vemos que solo aparece una URL rastreada.
Esto ocurre porque los enlaces internos están marcados como nofollow, lo que bloquea su seguimiento.
La solución: activar «Seguir nofollow interno»
Para solucionar esto y poder rastrear toda la web, sigue estos pasos:
- Abre Screaming Frog.
- Ve al menú Configuración > Spiderde > rastreo > Comportamiento de rastreo.
- Activa la opción «Seguir nofollow interno».
- Haz clic en Aceptar y vuelve a iniciar el rastreo.
¡Listo! Ahora Screaming Frog empezará en la home, pero seguirá los enlaces internos aunque estén marcados como «nofollow».
En el ejemplo, pasamos de rastrear solo una URL a 49 URLs detectadas, incluyendo redirecciones.
¿Por qué es útil esto?
Esta configuración es especialmente útil para:
- Auditar webs que están en desarrollo o preproducción y usan etiquetas noindex/nofollow como medida temporal.
- Detectar errores de rastreo ocultos.
- Hacer un análisis SEO completo, sin tener en cuenta el nofollow.
Mira el vídeo completo aquí
¿Te ha servido? Deja un like en el vídeo y suscríbete al canal para más tips prácticos de SEO.
¿Tienes dudas sobre Screaming Frog o el rastreo de tu web?
¡Déjalas en los comentarios y te responderé encantado!
