Als ich meine SEO- und digital-marketing-Reise begann, hatte ich oft Schwierigkeiten beim Einrichten und Verwenden der vielen verfügbaren Tools. Ich erinnere mich, dass ich in allen Armen darüber war, verwirrt durch all die verschiedenen Begriffe, ausgeklügelten Diagramme und schwindelerregenden Statistiken.
Der Versuch, ein Gleichgewicht zwischen dem Erlernen der Software im Tandem mit SEO-Konzepten zu finden, ist schwer, und Sie werden oft finden Sie sich zu dünn verteilt, nicht nur in Zeitsparen, sondern auch Rechenleistung.
Deshalb möchte ich als erfahrenerprofi den Anfängern, die mehr Zeit damit verbringen möchten, die wichtigeren Konzepte von SEO zu erlernen, eine Art Hilfe anbieten.
Um dieses neu entdeckte SEO-Wissen zu nutzen, müssen Sie die Software, die Sie verwenden, fest verstehen. Hier möchte ich Sie zu einem solchen Tool namens 'Screaming Frog' führen.
In diesem Beitrag werde ich mich damit befassen, was Screaming Frog ist, wie man ihn aufstellt und wie man einen Crawl ausführt, um sicherzustellen, dass Sie die Daten erhalten, die Sie für Ihr technisches SEO-Audit benötigen.
Was ist Screaming Frog?
Google wertet Ihre Website in einem Prozess aus, der in der digitalen Nische allgemein als "Crawling" bekannt ist. Es mag komisch klingen, aber es passt, wenn man darüber nachdenkt.
Google weist einen Bot auf Ihrer Website zu, um Ihre Inhalte zu "crawlen". Das bedeutet, dass ein Bot Ihre Seite untersucht, indem er sie umgeht, verlinkte Seiten auf Ihrer Website findet und sie dann verfolgt.
Jetzt denke ich, "folgen" wäre ein passender Begriff, aber "Crawling" hat sich gehalten. Und zugegeben, es klingt viel cooler.
Nun sowieso, zurück zum Thema.
Stellen Sie sich nun vor, dass es Millionen von Websites gibt, und Google kann nicht alle von ihnen auf die SERPs setzen. Die meisten fragen sich, warum ihre Websites und Artikel nicht zur Google-Websuche hinzugefügt werden.
Nun, einige Faktoren spielen eine wesentliche Rolle, unabhängig davon, ob Ihre Website und Ihr Inhalt indiziert werden oder nicht. Alles zu untersuchen ist mühsam, und Webmaster haben wenig Einblick, wie Google ihre Website durchforstet.
Nun, hier ist, wo Screaming Frog kommt ins Spiel. Das Screaming Frog SEO Spider Tool ist ein Website-Crawler, mit dem Sie Websites genau so crawlen können, wie es ein Google-Bot tun würde.
Das Tool ruft wichtige Vor-Ort-Daten ab und organisiert sie in verständlichen Statistiken und Berichten. Dies ermöglicht die einfache Identifizierung und Auswertung von Änderungen an der Website für die Verwendung in einem technischen SEO und Website-Audit.
Screaming Frog ermöglicht es Ihnen:
- Finden Sie fehlerhafte Links, die Sie beheben können
- Suche nach temporären und permanenten Umleitungen
- Analysieren von Metadaten
- Suchen doppelter Inhalte
- Überprüfen von robots.txt und anderen Richtlinien
- Erstellen von XML-Sitemaps
- Bewerten Sie unter anderem die Websitearchitektur.
Faktoren, die sich auf das Crawlen von Websites auswirken
Wie ich bereits sagte, wird das Crawlen einer Website von vielen verschiedenen Faktoren beeinflusst. Hier sind die prominentesten von ihnen.
Domain Name

Die Crawlingrate ist für domänen mit gutem Datenverkehr und guter Autorität höher. Das Google Panda Update hat Domain-Namen große Bedeutung beigemessen.
Domänennamen, die das Hauptschlüsselwort in sich haben, haben Vorrang vor denen, die nicht über die Hauptschlüsselwörter verfügen.
Relevant: Lesen Sie auch die Rezension von GoDaddy hier.
Backlinks

Wenn Sie anständige Rankings haben, aber wenig bis gar keine Backlinks zu Ihrer Website, dann würden Crawler davon ausgehen, dass Ihre Inhalte von geringer Qualität und Wert sind.
Eine zugrunde liegende Annahme von Suchmaschinen ist, dass je mehr Backlinks Ihre Website hat, desto seriöser ist Ihre Website.
Interne Verknüpfung

Interne Verknüpfungen sind die Praxis, eine Seite auf einer Website mit einer anderen Seite innerhalb derselben Website zu verknüpfen. Sie sind nützlich für die Navigation, Informationshierarchie und Link-Equity.
Interne Verlinkung ist eine gute Praxis nicht nur für SEO-Rankings, sondern auch für die Aufrechterhaltung aktiver Nutzer. Wer möchte in einer schwer zu navigierenden Website bleiben?
Es gibt zahlreiche Diskussionen über interne Verknüpfung und Verankerungstextnutzung, aber es gibt keinen universell korrekten Weg. Wichtig ist, zu erkennen, dass interne Verknüpfung eine gute Praxis ist, um in Ihre Website zu übernehmen.
XML-sitemap

Eine gut erstellte XML-Sitemap ist eine Art Roadmap, die Google zu allen relevanten Seiten führt. Manchmal werden einige Seiten am Ende keine internen Links zu ihnen gehen, so dass sie ziemlich schwierig zu finden.
Eine XML-Sitemap listet alle Seiten einer Website auf und informiert Google, dass die Website aktualisiert wurde und den Bot dazu bringen wird, die Website zu durchforsten.
URL Kanonisierung

Wenn Sie über mehrere URLs oder verschiedene Seiten mit mehr oder weniger demselben Inhalt auf eine Seite zugreifen können, interpretiert Google diese möglicherweise als doppelte Seiten. Der Bot wählt eine Website aus, um sie als ursprüngliche (Canon-)Version zu deklarieren und das zu crawlen, während die anderen Seiten als Duplikate gemeldet und seltener durchforstet werden.
✋ Stop worrying about SEO and have me do it for you

PS: Ready to work with the 0.01% of all SEOs worldwide? Click here.
Wenn Sie eine kanonische URL auswählen, wird die Seite angegeben, die in den Suchmaschinenergebnissen angezeigt wird, und sie mit doppelten Seiten konsolidiert. Dies ist wichtig für die richtige SEO.
Meta-Tags

Meta-Tags sind die Textausschnitte, die den Inhalt einer Seite umreißen und beschreiben. Das Foto oben ist ein Meta-Beschreibungs-Tag; Es gibt andere Meta-Tags, die nicht auf einer Suchmaschine und nur über den Quellcode einer Website sichtbar sind.
Um in Suchmaschinen zu rangieren, stellen Sie sicher, dass Sie nicht wettbewerbsfähige, aber eindeutige Tags haben.
Mit Screaming Frog können Sie schnell crawlen, analysieren und Vor-Ort-Audits für Websites aller Größen durchführen. Wichtige SEO-Elemente vor Ort können über CSV-Dateien exportiert und auf separater Tabellenkalkulationssoftware geöffnet werden.
Wo soll man anfangen?
Installation

Um zu starten, müssen Sie natürlich das Tool auf Ihrem Computer installieren. Es ist auf Microsoft, Mac und Linux verfügbar und kann bis zu 500 URLs gleichzeitig crawlen.
Wenn Sie das URL-Limit entfernen und Zugriff auf weitere Premium-Funktionen erhalten möchten, können Sie eine Lizenz erwerben.
Lizenzaktivierung
Wenn Sie die vollständig entsperrte Version verwenden möchten, müssen Sie eine Lizenz kaufen. Wenn Sie einen kaufen, erhalten Sie einen Lizenzschlüssel, der unter "Lizenz > Lizenz eingeben" eingegeben werden soll.
Wenn Sie richtig eingegeben werden, wird in einem Dialogfeld angegeben, dass der Lizenzschlüssel gültig ist, und ein Ablaufdatum angezeigt.
Vertrautheit mit der Benutzeroberfläche
Bevor ich etwas berühre, schlage ich vor, sich mit den Registerkarten, Einstellungen und Menüs vertraut zu machen.
- Datei. Im Menü "Datei" können Sie Ihre Durchforstungen als Dateien für das Ereignis speichern, für das sie nicht beendet wurde. Wenn Sie vergessen, eine zu speichern, können Sie auf die letzten sechs Crawls zugreifen, die Sie unter dieser Registerkarte ausgeführt haben.
- konfiguration. Dies kann als das wichtigste Menü betrachtet werden, mit dem Sie sich vertraut machen können. Klicken Sie auf "Spider", um die Anpassungen basierend auf den Teilen zu ändern, die durchforstet werden sollen, und den Daten, die Sie sehen möchten.
- Massenexport. In diesem Menü können Sie Adressen mit bestimmten Antwortcodes, Inlinks, Direktiven, Bildern und mehr exportieren.
- Berichte. Im Berichtsmenü können Sie eine Übersicht über Ihre Durchforstungssitzung sowie Berichte zu einem bestimmten Datensatz wie kanonische Fehler und Umleitungslinks herunterladen.
- Sitemaps. Mit dem Menü Sitemaps können Sie eine Sitemap für Ihre Siteerstellen erstellen.
Einrichten Ihres Geräts
Einrichten von Speicher und Speicher
Wenn Sie mit dem Crawlen von Websites beginnen, werden Sie feststellen, dass einige Websites größer als andere sind und daher mehr Arbeitsspeicher und Rechenleistung benötigen. Wenn Sie direkt zum Crawling der Website gehen möchten oder die eingeschränkte kostenlose Version verwenden, dann können Sie diesen Schritt ignorieren.
Aber wenn Sie viele und viele Websites kriechen wollen, dann wäre es ratsam, mehr von Ihrem RAM und Rechenleistung zu Screaming Frog zuzuweisen.
Wenn Sie über eine SSD verfügen, wird empfohlen, über "Konfiguration > System > Speicher" in den Datenbankspeichermodus zu wechseln und die Option Datenbankspeichermodus auszuwählen.
Wenn nicht, dann können Sie mit dem RAM-Speichermodus bleiben, mit Standardeinstellungen von 1 GB RAM für 32-Bit-Maschinen und 2 GB RAM für 64-Bit-Varianten. Screaming Frog widmet eine GB-Gesamtzahl, die 2 GB niedriger ist als Ihre volle Kapazität, um Einfrieren und Abstürze zu verhindern.
Wenn Sie mit der Zuweisung von mehr RAM fertig sind, starten Sie die Software neu, damit die Änderungen angewendet werden.
Anpassen von Konfigurationen
Sie müssen keine kräftigen Änderungen an Screaming Frog vornehmen, da die SEO-Spinne bereits eingerichtet ist, um Websites wie Google zu crawlen. Es gibt jedoch eine Vielzahl von Möglichkeiten, Ihre Durchforstung zu konfigurieren und nur die Daten zu erhalten, die Sie benötigen, nicht nur Zeit, sondern auch Rechenleistung zu sparen.
Wenn Sie eine Website mit JavaScript durchforsten, können Sie den JavaScript-Renderingmodus verwenden, indem Sie zu 'Konfiguration > Spider > Rendering' wechseln. JavaScript wird dann ausgeführt, damit das Spider-Tool dann den HTML-Code durchforsten kann.
Die verschiedenen Konfigurationsoptionen benötigen einen separaten technischen Beitrag. Für den Moment, aber, wissen, dass die grundlegende integrierte SEO Spinne Konfiguration ist genug für viele Ihrer Bedürfnisse.
Mit Screaming Frog
Da Sie nun wissen, wie Sie den Speicher, den Speicher und die Konfigurationen einrichten und mit der Schnittstelle vertraut gemacht werden, ist es an der Zeit, das Tool zum Durchforsten einer Website zu verwenden.
Starten einer Durchforstung
Es gibt zwei Modi zum Durchforsten einer Website: den Standardmodus "Spider", der eine einzelne Website durchforstet, und den "Listenmodus", der eine Liste von URLs durchforsten, die Sie durch Kopieren und Einfügen eingeben können.
Starten Sie eine regelmäßige Spinnen-Crawl, indem Sie die Homepage-URL in das Feld eingeben und auf Start klicken.

Die Durchforstungsaktualisierungen in Echtzeit und Metriken wie Geschwindigkeit und Anzahl der URLs werden über die Statusleiste unten angezeigt. Wenn Sie eine Liste von URLs und nicht die gesamte Website durchforsten möchten, klicken Sie auf "Modus > Liste", um eine Liste der URLs hochzuladen oder zu kopieren und einzufügen.
Beachten Sie beim Crawlen:
- Sie können in einem Moment sparen (nur mit einer Lizenz).
- Sie können die Durchforstung beenden und fortsetzen, wenn Sie später möchten,
- Das Verlassen des Screaming Frog oder das Ausschalten Ihres Geräts würde zu einem Verlust nicht gespeicherter Daten führen,
- Sie können die Durchforstung speichern, das Programm beenden und später (nur mit einer Lizenz) am gespeicherten Ort fortsetzen.
Anzeigen von Durchforstungsdaten
Es wird Registerkarten geben, die sich auf verschiedene Elemente konzentrieren. Jede Registerkarte verfügt über Filter, die Daten nach Typen dividieren, und es gibt Registerkarten für potenzielle Fehler, die erkannt werden.
Sie können oben auf die URLs klicken, die Tabs in der unteren Hälfte des Bildschirms anzeigen. Klicken Sie auf diese unteren Registerkarten, um das untere Panel aufzufüllen.
Anzeigen potenzieller Probleme
Im rechten Fenster des Bildschirms befindet sich eine Registerkarte "Übersicht", die eine Zusammenfassung der Durchforstungsdaten in jeder der anderen Registerkarten darstellt. Sie können dies verwenden, um Fehler und Probleme anzuzeigen, ohne auf jede Registerkarte klicken zu müssen.
Sie können auf die Einträge auf der Registerkarte klicken, um auf die entsprechende Registerkarte zu gehen und direkt zu filtern.
Exportieren der Daten
Aus der Durchforstung können Sie die Daten in Tabellenkalkulationssoftware exportieren. Klicken Sie einfach auf die Schaltfläche "Exportieren", um die Daten aus den oberen Registerkarten und Filtern zu exportieren.
Um Daten aus unteren Fenstern zu exportieren, klicken Sie mit der rechten Maustaste auf die URLs, aus denen Sie Daten exportieren möchten, und wählen Sie dann eine der vier Optionen aus: Inlinks, Outlinks, Bilddetails und Ressourcen.
Das oben erwähnte Massenexportmenü ermöglicht es Ihnen, die Quelllinks wie Antwortcodes, Kanonikale, Direktiven usw. zu exportieren.
Speichern und Öffnen von Crawls
Wie bereits erwähnt, können Sie Crawls nur speichern und fortsetzen, wenn Sie über eine Lizenz verfügen. Im Standardspeichermodus können Sie eine Durchforstung jederzeit speichern, während Sie angehalten werden oder wenn sie beendet ist, und sie erneut öffnen.
Im Datenbankspeichermodus (wenn Sie sich dafür entschieden haben) werden Durchforstungen automatisch gespeichert.
Im resultierenden Fenster werden die automatisch gespeicherten Durchforstungen angezeigt, die Sie dann organisieren, duplizieren, exportieren oder löschen können.
Einpacken!
Und da haben Sie es! Nachdem Sie die Daten haben, ist es an der Zeit, ihnen durch ein technisches SEO-Audit Kontext zu geben; die samt diesem Beitrag jedoch nicht abgedeckt ist.
Es ist wichtig zu wissen, dass Screaming Frog kein technisches SEO-Audit-Tool ist; es ist nur Software zu verwenden, um Ihnen zu helfen, die Daten und Berichte für ein technisches SEO-Audit benötigt zu sammeln.
Ich hoffe, dass dieser Artikel Ihnen helfen wird, Screaming Frog für sich selbst einzurichten und Ihren ersten Crawl auszuführen.
Möchten Sie mehr SEO-Tools wissen? Schauen Sie sich diese Bewertungen, die ich vor kurzem getan.
- Surfer SEO kennenlernen
- Was ist BuzzSumo und ist es gut für Ihr Unternehmen?
- Ahrefs als SEO-Tool erkunden
Wie war Ihre Erfahrung mit Screaming Frog? Lassen Sie mich in den Kommentaren unten wissen!