Schreiender Frosch SEO Spider. Wie der Account Manager die Software eingerichtet hat

Dieser Artikel wird für diejenigen nützlich sein, deren Arbeit das Scannen von Projekten sowie das Festlegen von Parametern umfasst, die sowohl für mittelgroße Websites mit bis zu 500.000 URLs als auch für kompaktere Webressourcen geeignet sind.

Ein wichtiger Aspekt ist in unserem Unternehmen, wie in jeder großen Digitalagentur, die Optimierung und Automatisierung von Routineprozessen. Dadurch bleibt Zeit für strategischere Aufgaben.

Nachdem ich zwei Monate in der Agentur gearbeitet hatte, wurde ich damit beauftragt, jeden Monat ein paar Projekte zu scannen. Ich bin kein SEO-Neuling, aber meine Hauptspezialisierung ist Account Management und Marketing.

Von Zeit zu Zeit analysierte ich als Account Manager die Sichtbarkeit von Kundenseiten in den Suchergebnissen und führte auch einen detaillierten Scan der Webressourcen durch. Dazu habe ich das Programm Screaming Frog SEO Spider verwendet. Nach der Installation der Software habe ich von der Geschäftsführung eine Lizenz erhalten und die Programmeinstellungen nicht angerührt, da alles gut funktioniert hat und man bekanntlich nichts ändern sollte, was nicht kaputt ist.

Allerdings änderte sich alles, als mir die Leitung eines größeren Projekts mit 430.000 URLs übertragen wurde. Zuvor habe ich an Projekten mit maximal 1700 URLs gearbeitet. Das Problem bestand nicht darin, dass das Scannen des Projekts einen Tag dauerte (was, wie sich herausstellte, die Norm ist), sondern dass das Programm beim Starten des Scans oft bei 88–94 % des Prozesses einfror.

Obwohl die Anleitung für Screaming Frog recht ausführlich ist, gibt sie keine konkreten Empfehlungen für die Einrichtung des Programms für große Projekte. Dann begann ich, nach Informationen zur richtigen Verwendung des SEO Spider Tools zu suchen. Nachdem ich mehrere Artikel noch einmal gelesen hatte, wurde mir klar, dass sie dasselbe wie in der Anleitung wiederholen, nur kürzer.

Aus diesem Grund habe ich beschlossen, mich an erfahrene Kollegen zu wenden, die mir, wofür ich ihnen sehr danke, die Funktionsweise des Programms erklärt und mir einige nützliche Empfehlungen für die Einrichtung gegeben haben.

Nach drei Tagen des Experimentierens, Ausprobierens und der Beratung mit Kollegen kam ich zu folgenden Schlussfolgerungen:

Geräteeigenschaften:

  • Prozessor – Intel® Core™ i3-7020U CPU 2,30 GHz
  • RAM - 8 GB
  • Systemtyp – 64-Bit-Betriebssystem, x64-Prozessor

Wie Sie sehen, sind die Eigenschaften des Geräts durchschnittlich und für die Erfüllung meiner Aufgaben durchaus geeignet. Ich brauchte keine leistungsstarke Hardware, da diese für alltägliche Aufgaben völlig ausreicht.

Einstellungen des Screaming Frog SEO Spider-Programms (Version 14.1):

  • Die Projektdaten werden auf einer SSD-Festplatte (107 GB) aufgezeichnet. Der Füllstand des Datenträgers sollte überwacht werden und veraltete Daten ggf. manuell durch Exportieren des Projekts gelöscht werden.
  • JavaScript-Rendering aktiviert.
  • Einschränkungen für die Anzahl der Scan-Threads sind deaktiviert.
  • Die maximale Anzahl an URLs pro Sekunde beträgt 2.
  • Wenn andere ressourcenintensive Prozesse parallel auf einem Arbeitsgerät ausgeführt werden (z. B. das Parsen in anderen Anwendungen), sollte das Crawling angehalten werden.

Wichtig! Stellen Sie in den Programmeinstellungen sicher, dass Projektinformationen auf eine SSD-Festplatte geschrieben werden. Dies beschleunigt den Scanvorgang erheblich.

Bei solchen Geräteeigenschaften und den angegebenen Einstellungen dauert das Scannen eines Projekts mit 420-450.000 URLs etwa 30 Stunden, wenn mindestens 12 Stunden Scan parallel zu anderen Aufgaben durchgeführt werden.

Die Entscheidung, diesen Artikel zu schreiben und zu veröffentlichen, fiel nach erfolglosen Versuchen, Empfehlungen für die Einrichtung des Screaming Frog-Programms in offenen Quellen zu finden. Die meisten Artikel erklärten lediglich, was und wie das Programm funktioniert, gaben jedoch keine praktischen Ratschläge zur Einrichtung für große Projekte. Ich hoffe, dass diese Informationen nützlich sind. Lesen, verwenden, mit Kollegen teilen und möge die Macht mit Ihnen sein!

Wenn Sie Fragen haben, können Sie sich per E-Mail an info@seo.computer an das SEO-Studio „SEO COMPUTER“ wenden.

ID 1744

Senden Sie eine Anfrage und wir beraten Sie gerne An SEO Werbung für Ihre Website