Este artículo será útil para aquellos cuyo trabajo incluye escanear proyectos, así como configurar parámetros adecuados tanto para sitios medianos con hasta 500 mil URL como para recursos web más compactos.
En nuestra empresa, como en cualquier gran agencia digital, un aspecto importante es la optimización y automatización de procesos rutinarios. Esto libera tiempo para tareas más estratégicas.
Después de dos meses en la agencia, me asignaron escanear algunos proyectos cada mes. No soy nuevo en SEO, pero mi principal especialización es la gestión de cuentas y el marketing.
De vez en cuando, como administrador de cuentas, analizaba la visibilidad de los sitios de los clientes en los resultados de búsqueda y también realizaba un análisis detallado de los recursos web. Para hacer esto, utilicé el programa Screaming Frog SEO Spider. Después de instalar el software, recibí una licencia de la administración y no toqué la configuración del programa, ya que todo funcionó bien y, como saben, no se debe cambiar algo que no esté roto.
Sin embargo, todo cambió cuando me asignaron liderar un proyecto más grande con 430 mil URL. Anteriormente trabajé en proyectos con un máximo de 1700 URL. El problema no fue que escanear el proyecto tomara un día (lo cual resultó ser la norma), sino que al iniciar el escaneo, el programa a menudo se congelaba en el 88-94% del proceso.
Aunque las instrucciones de Screaming Frog son bastante detalladas, no brindan recomendaciones específicas para configurar el programa para proyectos grandes. Luego comencé a buscar información sobre cómo utilizar correctamente la herramienta SEO Spider. Después de releer varios artículos, me di cuenta de que repiten lo mismo que en las instrucciones, solo que más brevemente.
Como resultado, decidí pedir ayuda a colegas experimentados, quienes, por lo que les agradezco mucho, me explicaron cómo funciona el programa y me dieron varias recomendaciones útiles para configurarlo.
Después de tres días de experimentación, prueba y error y consultas con colegas, llegué a las siguientes conclusiones:
Características del dispositivo:
Como puede ver, las características del dispositivo son medias y bastante adecuadas para realizar mis tareas. No necesitaba hardware potente, ya que es suficiente para las tareas cotidianas.
Configuración del programa Screaming Frog SEO Spider (versión 14.1):
¡Importante! En la configuración del programa, asegúrese de especificar que la información del proyecto se escriba en un disco SSD; esto acelera significativamente el proceso de escaneo.
Con tales características del dispositivo y la configuración especificada, escanear un proyecto con 420-450 mil URL lleva alrededor de 30 horas, si se realizan al menos 12 horas de escaneo en paralelo con otras tareas.
La decisión de escribir y publicar este artículo se produjo después de intentos fallidos de encontrar recomendaciones para configurar el programa Screaming Frog en fuentes abiertas. La mayoría de los artículos sólo explican qué y cómo funciona el programa, pero no dan consejos prácticos sobre cómo configurarlo para proyectos grandes. Espero que esta información sea útil. ¡Lea, use, comparta con colegas y que la Fuerza esté con usted!
Si tienes alguna duda puedes contactar con el estudio SEO “SEO COMPUTER” para cualquier duda en el correo electrónico info@seo.computer.
identificación 1744