01Qué es y cómo funciona
Screaming Frog SEO Spider se ejecuta localmente en Windows, macOS o Linux y rastrea un dominio partiendo de una URL semilla. Realiza peticiones HTTP, analiza el HTML, el DOM renderizado con JavaScript (en el modo de renderizado de JavaScript), robots.txt, XML Sitemap y los encabezados de respuesta, para luego almacenar el código de estado, el contenido y los metadatos de cada URL. Los resultados se presentan en una interfaz con pestañas y pueden exportarse a CSV o Excel. La versión gratuita limita los rastreos a 500 URLs; la licencia de pago elimina este límite y desbloquea funciones como rastreos programados, extracción personalizada mediante XPath/CSS path e integración con Google Search Console y analytics. Debido a que la herramienta imita a un bot de los motores de búsqueda, saca a la luz las mismas clases de problemas que los rastreadores encuentran en producción: bucles de redirección, soft 404s, conflictos de canonical, recursos bloqueados y contenido delgado o duplicado.
Es un programa que instalas en tu ordenador que visita tus páginas web de la misma forma que lo hace Google, y luego enumera los problemas que encuentra, como enlaces rotos, etiquetas faltantes y cadenas de redirección.
02Qué hacer al respecto esta semana
Realiza un rastreo de tu propio dominio y de uno de tus principales competidores. En el rastreo, filtra la pestaña Response Codes para obtener los códigos de estado 4xx y 5xx, luego ordena las pestañas Page Titles y Meta Descriptions para encontrar entradas faltantes, duplicadas o con exceso de longitud. Exporta la pestaña Hreflang si tienes un sitio multilingüe y verifica que cada URL tenga un clúster de hreflang válido. Utiliza la función Custom Extraction para extraer campos de datos estructurados, como el precio de Product o la calificación de Review, y compara la cobertura con lo que es visible en la página renderizada. Si tienes acceso, realiza un segundo rastreo en modo de renderizado JavaScript para comparar lo que devuelve el HTML original frente a lo que ve un usuario tras la ejecución de los scripts. El objetivo es obtener una lista corta de correcciones concretas, no una exportación de 50,000 filas.
03Cómo se mide o se detecta
La cobertura se mide comparando el número de URLs distintas que descubre el spider frente al número de URLs que Google indexa; una brecha persistente suele indicar un desperdicio del presupuesto de rastreo (crawl budget), páginas huérfanas o reglas de robots.txt demasiado amplias. Los problemas estructurales aparecen en las pestañas Redirect Chains y Redirect Loops, donde una longitud de cadena superior a dos saltos es una señal de alerta. La cobertura de metadatos se lee directamente de las columnas Page Titles y Meta Descriptions, donde las celdas vacías indican la falta de etiquetas y las celdas idénticas indican duplicación. La indexabilidad se obtiene de la combinación del Indexability Status (Indexable, Non-Indexable, Blocked by robots) y la pestaña Canonical, que enumera las canonicales declaradas y si estas se resuelven. El rendimiento se lee de la columna Response Time, la cual es útil para detectar plantillas lentas que Googlebot podría rastrear con menos frecuencia.
04Errores comunes
- Tratar el límite de URLs como una auditoría del sitio: 500 URLs son suficientes para detectar patrones en un sitio pequeño, pero no para representar una propiedad de 100,000 páginas.
- Bloquear el user agent en el
robots.txty luego preguntarse por qué el rastreo está vacío. - Ignorar la diferencia entre las pestañas
InternalyExternaly aplicar correcciones que, en realidad, están fuera de tu control. - Comparar un único rastreo de escritorio (desktop crawl) contra el índice móvil de Google sin habilitar el user agent móvil o la renderización de JavaScript.
- Dejar la configuración de rastreo predeterminada en un sitio grande y agotar la memoria, lo que produce resultados parciales que parecen autoritativos.
05Límites y confusiones comunes
Screaming Frog SEO Spider no es un rastreador de posiciones (rank tracker), un índice de backlinks ni un sustituto de los logs del servidor. Obtiene las páginas desde tu máquina de la misma manera que lo haría un navegador, lo que significa que no ve lo mismo que ve Googlebot si tu sitio sirve contenido diferente según la IP, el user agent o la geografía. Tampoco realiza un análisis real de Lighthouse; las métricas de velocidad de página (page speed insights) deben provenir de una herramienta independiente. Los resultados son una muestra: el spider obedece el robots.txt y se detiene donde tú se lo indiques, por lo que un rastreo truncado puede ocultar problemas en lugar de revelarlos. Finalmente, suele confundirse con una plataforma SEO completa como Ahrefs, Semrush o Lumar; en la práctica, el spider responde preguntas técnicas sobre tu propio sitio, mientras que esas plataformas añaden datos de terceros sobre competidores, backlinks y demanda de palabras clave.
06Ejemplo práctico
Un marketer sospecha que el lanzamiento de una nueva línea de productos ha introducido contenido duplicado a través de la navegación facetada. Abre Screaming Frog SEO Spider, pega la página de inicio en la barra de direcciones y configura el rastreo para seguir las etiquetas canonical en lugar de cada parámetro. Una vez completado el rastreo, abre la pestaña Duplicate y descubre que 312 URLs comparten el mismo ` y 89 comparten una meta descripción casi idéntica. Una cita de la pestaña Content` dice:
"Detected 89 duplicate meta descriptions across URLs under /shop?colour= and /shop?size=." Sugerido: la canonical apunta a la página de la categoría principal.
07Preguntas frecuentes
¿En qué se diferencia Screaming Frog SEO Spider de un rank tracker?
Un rank tracker monitoriza en qué posición aparecen tus páginas en los resultados de búsqueda para palabras clave específicas. Screaming Frog SEO Spider rastrea tu sitio tal como lo hace Google e informa sobre problemas técnicos como enlaces rotos, etiquetas meta faltantes o contenido duplicado. Miden cosas distintas y cumplen funciones diferentes en un flujo de trabajo de SEO.
¿Necesito conocimientos de programación para usar Screaming Frog SEO Spider?
No. La herramienta tiene una interfaz gráfica y no requiere código. Introduces una URL, haces clic en crawl y lees los resultados en una tabla similar a una hoja de cálculo. Tener conocimientos básicos de SEO te ayuda a entender qué problemas son importantes, pero la herramienta en sí está diseñada para profesionales de SEO que no son desarrolladores.
¿Por qué mis resultados de rastreo son diferentes de lo que Google indexa?
Un rastreo suele encontrar más URLs de las que Google muestra en su índice porque el spider no respeta los límites de presupuesto de rastreo de la misma forma que Google. Las razones comunes de esta diferencia incluyen páginas huérfanas, parámetros de ID de sesión, directivas noindex o etiquetas canonical que apuntan a otro lugar. La diferencia en sí misma es la señal para investigar, más que un problema que resolver.
¿Qué pasa si rastreo un sitio sin permiso?
Rastrear sitios de terceros sin autorización puede activar bloqueos, consumir sus recursos de servidor y plantear problemas legales. Rastrea siempre tus propios dominios o sitios de los que tengas permiso explícito para auditar. La herramienta te permite establecer límites de velocidad y el respeto a robots.txt para minimizar las interrupciones en tus propias propiedades.
¿Puede Screaming Frog SEO Spider sustituir al análisis de los logs del servidor?
No. El spider simula el rastreo, pero no ve lo que Googlebot recibió realmente ni cómo respondió tu servidor. Los logs del servidor muestran los encabezados de solicitud reales, los códigos de respuesta y la frecuencia de rastreo. Usa el spider para encontrar problemas y usa los logs para confirmar si Googlebot encontró esos problemas en la práctica.
08Preguntado en voz alta
El mismo término en las palabras que alguien usa al hablar con un asistente en lugar de escribir en un buscador: escrito desde la situación, y por eso cada pregunta lleva la situación de la que salió.
Por lo general, sí. Un sitio pequeño de unas pocas cientos de páginas puede terminar en menos de un minuto. Incluso los sitios más grandes muestran problemas críticos, como errores 4xx y títulos faltantes, en los primeros minutos del rastreo. Comienza el rastreo ahora y ordena por código de estado para ver los problemas primero.
Las cadenas de redirección significan que una URL pasa por más de una redirección antes de llegar al destino. Ralentizan a Googlebot y desperdician el presupuesto de rastreo. Corrige la cadena actualizando la redirección para que apunte directamente al destino final. Verás que la advertencia desaparece una vez que la cadena sea de un solo salto.
Por lo general, no es una crisis. Los parámetros de la URL suelen crear duplicados de rastreo que Google ignora. Comprueba si la página tiene una etiqueta canonical que apunte a la URL limpia. Si la tiene, no hay problema. Si no, añade una para indicarle a Google qué versión es la principal.