Laisser une demande
Cet article sera utile à ceux dont le travail comprend l'analyse de projets, ainsi que la définition de paramètres adaptés à la fois aux sites de taille moyenne contenant jusqu'à 500 000 URL et aux ressources Web plus compactes.
Dans notre entreprise, comme dans toute grande agence numérique, un aspect important est l’optimisation et l’automatisation des processus de routine. Cela libère du temps pour des tâches plus stratégiques.
Après avoir passé deux mois à l'agence, j'ai été chargé de scanner quelques projets chaque mois. Je ne suis pas nouveau dans le référencement, mais ma principale spécialisation est la gestion de comptes et le marketing.
De temps en temps, en tant que responsable de compte, j'analysais la visibilité des sites clients dans les résultats de recherche, et effectuais également une analyse détaillée des ressources Web. Pour ce faire, j'ai utilisé le programme Screaming Frog SEO Spider. Après avoir installé le logiciel, j'ai reçu une licence de la direction et je n'ai pas touché aux paramètres du programme, car tout a bien fonctionné et, comme vous le savez, il ne faut pas changer quelque chose qui n'est pas cassé.
Cependant, tout a changé lorsque j'ai été chargé de diriger un projet plus vaste comportant 430 000 URL. Auparavant, je travaillais sur des projets comportant un maximum de 1700 URL. Le problème n'était pas que l'analyse du projet prenait une journée (ce qui s'est avéré être la norme), mais que lors du démarrage de l'analyse, le programme se bloquait souvent à 88-94 % du processus.
Bien que les instructions de Screaming Frog soient assez détaillées, elles ne fournissent pas de recommandations spécifiques pour la mise en place du programme pour de grands projets. Ensuite, j'ai commencé à chercher des informations sur la façon d'utiliser correctement l'outil SEO Spider. Après avoir relu plusieurs articles, je me suis rendu compte qu'ils répétaient la même chose que dans les instructions, mais plus brièvement.
En conséquence, j'ai décidé de faire appel à des collègues expérimentés qui, pour lesquels je les remercie beaucoup, m'ont expliqué le fonctionnement du programme et m'ont donné plusieurs recommandations utiles pour sa mise en place.
Après trois jours d’expérimentation, d’essais et d’erreurs et de consultation avec des collègues, je suis arrivé aux conclusions suivantes :
Caractéristiques de l'appareil :
Comme vous pouvez le constater, les caractéristiques de l'appareil sont moyennes et tout à fait adaptées à l'exécution de mes tâches. Je n’avais pas besoin d’un matériel puissant, car c’est largement suffisant pour les tâches quotidiennes.
Paramètres du programme Screaming Frog SEO Spider (version 14.1) :
Important! Dans les paramètres du programme, assurez-vous de spécifier que les informations du projet sont écrites sur un disque SSD ; cela accélère considérablement le processus d'analyse.
Avec de telles caractéristiques de l'appareil et les paramètres spécifiés, l'analyse d'un projet comportant 420 à 450 000 URL prend environ 30 heures, si au moins 12 heures d'analyse sont effectuées en parallèle avec d'autres tâches.
La décision d'écrire et de publier cet article est intervenue après des tentatives infructueuses pour trouver des recommandations pour la mise en place du programme Screaming Frog en open source. La plupart des articles expliquent uniquement le fonctionnement et le fonctionnement du programme, mais ne donnent pas de conseils pratiques sur sa mise en place pour de grands projets. J'espère que ces informations sont utiles. Lisez, utilisez, partagez avec vos collègues, et que la Force soit avec vous !
Si vous avez des questions, vous pouvez contacter le studio SEO « SEO COMPUTER » pour toute question par email info@seo.computer.
ID 1744
