
Esta herramienta ofrece una amplia gama de funciones, desde comprobar la exactitud de las metaetiquetas hasta analizar el micromarcado, lo que la hace indispensable para el análisis detallado de sitios de varios tamaños.
En esta guía, veremos las configuraciones y características básicas de SEO Spider que lo ayudarán a analizar y mejorar su sitio de manera efectiva.
Abra el menú Archivo → Configuración → Asignación de memoria.
Se recomienda asignar 8 GB de memoria para proyectos grandes, o la mitad de la memoria disponible.

Vaya a Archivo → Configuración → Modo de almacenamiento.
El valor predeterminado es Almacenamiento en memoria. Se recomienda cambiar a Almacenamiento de base de datos (disco duro), especialmente si la unidad es SSD, para acelerar el proceso de escaneo.

En la configuración (Archivo → Configuración → Proxy) puede configurar un servidor proxy si su IP está bloqueada en un sitio determinado, lo que ayudará a evitar el bloqueo.

Vaya a Configuración → Configuración de rastreo → Velocidad.
El valor óptimo para Max Threads es hasta 5. Aumentar el número de threads puede provocar el bloqueo o la sobrecarga del sitio durante el escaneo.
Deje el parámetro Limitar URL/s en 2,0 URL por segundo. Para errores 5XX, reduzca el valor a 1,0 o 0,5 para mayor estabilidad.

Vaya a Configuración → Configuración de rastreo → Spider → Rastreo.
Si desea escanear solo una sección seleccionada del sitio, desmarque la opción "Verificar enlaces fuera de la carpeta de inicio". Al habilitar "Rastrear fuera de la carpeta de inicio", se expande el área de rastreo a todos los enlaces del sitio.
Si es necesario, active la opción "Rastrear todos los subdominios" para rastrear subdominios y también configurar enlaces de rastreo con el atributo nofollow.

No olvide habilitar la opción "Rastrear mapas de sitios XML vinculados" para analizar páginas que pueden no tener enlaces directos, pero que aparecen en el mapa del sitio.

Este modo imita el comportamiento de los motores de búsqueda: desde la página principal, el sitio se rastrea mediante enlaces internos, profundizando en los niveles de la estructura.
Puede cargar un archivo con URL para rastrear, ingresarlas manualmente o usar un enlace al mapa del sitio XML.

Este modo analiza sólo Título y Descripción. El modo se utiliza con menos frecuencia y es adecuado para comprobaciones simples de metadatos.
Le permite comparar resultados de diferentes análisis, lo que resulta útil para realizar un seguimiento de los cambios o solucionar errores.
Vaya a Configuración → Configuración de rastreo → Contenido → Duplicados.
Cuando la opción "Verificar solo páginas indexables en busca de duplicados" está habilitada, el programa buscará duplicados solo entre las páginas disponibles para indexar.
La opción "Habilitar casi duplicados" le permite establecer el porcentaje de coincidencia de contenido, lo que le ayuda a encontrar duplicados ocultos.

Puede ver los resultados en la sección Contenido → Todo, ordenando las páginas por recuento de palabras. Las páginas con poco contenido pueden resultar menos útiles para los motores de búsqueda.

Particularmente útil para sitios con catálogos de productos, donde puede identificar páginas con contenido único insuficiente. Defina las clases o identificadores correctos para las tarjetas de productos y configure el filtrado.

Para verificar la disponibilidad de contadores analíticos (por ejemplo, Yandex.Metrica o Google Analytics), puede utilizar el modo de búsqueda por código de página insertando el número del contador en la configuración de búsqueda.

Después de escanear el sitio, puede ver metaetiquetas y títulos en la sección Título de la página. Es importante revisar puntos como:

Observamos los resultados en la sección Códigos de respuesta. Es importante prestar atención a errores como 4xx y 5xx deben corregirse para que las páginas se carguen correctamente;