Screaming Frog nutzen: der komplette Guide 2026

Aktualisiert im Mai 2026.

Kurzfassung: Screaming Frog SEO Spider ist ein Desktop-Crawler, der nachbildet, wie Googles Bots deine Website durchlaufen. Kostenlos bis 500 URLs; die kostenpflichtige Lizenz hebt das Limit auf und schaltet JS-Rendering, Integrationen und geplante Crawls frei. Damit findest du defekte Links, Redirect-Ketten, fehlende Meta-Tags, Duplicate Content und Crawlbarkeitsprobleme, bevor sie dich Rankings kosten.

Als ich mit SEO und Online-Marketing anfing, war Screaming Frog das erste Tool, das technisches SEO für mich greifbar gemacht hat. Aus abstrakten Konzepten — Crawl-Budget, Kanonisierung, Redirect-Ketten — werden konkrete URL-Listen, die du heute abarbeiten kannst.

Daran hat sich 2026 nichts geändert. Im Gegenteil: Technische SEO-Hygiene zählt heute mehr, weil Googles AI Overviews und generative Engines strukturierte, sauber organisierte Inhalte zum Zitieren heranziehen. Eine Website, die Googlebot nicht effizient crawlen kann, wird auch nicht zitiert.

Was dieser Guide abdeckt: Installation von Screaming Frog, die wichtigsten Bereiche der Oberfläche, Speicher- und Storage-Einstellungen, den ersten Crawl, das Lesen der Ergebnisse und was du danach mit den Daten machst.

Table of contents

Open Table of contents

• Was ist Screaming Frog?
• Faktoren, die die Crawlbarkeit einer Website beeinflussen
  • Domain-Autorität und Traffic-Signale
  • Backlinks
  • Interne Verlinkung
  • XML-Sitemap
  • URL-Kanonisierung
  • Meta-Tags
• Wo du anfängst
  • Installation
  • Lizenz aktivieren
  • Mach dich mit der Oberfläche vertraut
• Das Gerät für größere Crawls vorbereiten
  • Arbeitsspeicher und Storage
  • JavaScript-Rendering
• Screaming Frog einsetzen
  • Einen Crawl starten
  • Crawl-Daten ansehen
  • Mögliche Probleme in der Overview sehen
  • Die Daten exportieren
  • Crawls speichern und öffnen
• Was du nach dem Crawl machst
• Screaming Frog 2026 — was sich geändert hat
• Screaming Frog FAQ — 2026
  • Lohnt sich Screaming Frog noch, wenn KI-Tools wie ChatGPT Websites prüfen können?
  • Wie crawle ich eine JavaScript-lastige Website richtig?
  • Was ist der Unterschied zwischen Spider-Modus und List-Modus?
  • Hilft Screaming Frog bei der Optimierung für AI Overviews?
• Was sich 2026 geändert hat

Was ist Screaming Frog?

Screaming Frog SEO Spider ist eine Desktop-Anwendung (Windows, Mac, Linux), die Websites genauso durchläuft wie ein Suchmaschinen-Bot — sie folgt Links, liest HTML, sammelt Onpage-Daten und markiert Probleme.

Das Tool holt sich die Onsite-Daten und sortiert sie in filterbare Tabs und exportierbare Reports. Damit lassen sich technische SEO-Probleme auf Websites jeder Größe schnell erkennen und priorisieren.

Typische Einsatzzwecke:

1. Defekte Links (4xx-Fehler) finden und beheben
2. Temporäre und permanente Weiterleitungen erkennen — inklusive Redirect-Ketten
3. Metadaten prüfen: Titel, Descriptions, H1s, Canonicals
4. Duplicate Content und dünne Seiten aufspüren
5. robots.txt-Direktiven und noindex-Tags kontrollieren
6. XML-Sitemaps erzeugen
7. Seitenarchitektur und Klicktiefe der internen Verlinkung bewerten
8. JavaScript-lastige Seiten rendern, um zu sehen, was der Crawler wirklich bekommt

Kostenlos vs. kostenpflichtig: Die kostenlose Version crawlt bis zu 500 URLs — genug für kleine Websites oder Stichproben. Die kostenpflichtige Jahreslizenz hebt das URL-Limit auf und ergänzt JS-Rendering, die Anbindung an Google Analytics und die Search Console, Custom Extraction, geplante Crawls und mehr. (Aktuelle Preise findest du auf der Preisseite von Screaming Frog — vor dem Kauf prüfen.)

Faktoren, die die Crawlbarkeit einer Website beeinflussen

Bevor du einen Crawl startest, hilft es zu wissen, was du eigentlich misst. Das sind die wichtigsten Signale dafür, wie effizient ein Suchmaschinen-Bot durch deine Website navigiert.

Domain-Autorität und Traffic-Signale

Websites mit stärkerer Autorität werden tendenziell häufiger gecrawlt. Google verteilt Crawl-Budget danach, wie wertvoll und vertrauenswürdig eine Website eingeschätzt wird. Screaming Frog hilft dir, genau die Signale zu prüfen, die das beeinflussen — Klicktiefe, interne Linkstruktur, Antwortzeiten.

Siehe auch: mein GoDaddy-Test, falls du gerade Domain-Registrare vergleichst.

Backlinks

Suchmaschinen behandeln Backlinks wie Stimmen. Seiten mit starker externer Linkkraft werden häufiger gecrawlt und schneller indexiert. Ein Screaming-Frog-Crawl zeigt dir dein Backlinkprofil nicht direkt, aber er deckt verwaiste Seiten auf (ohne interne Links) — also Seiten, die allein über externe Links gefunden werden können.

Interne Verlinkung

Interne Verlinkung bedeutet, Seiten innerhalb derselben Website miteinander zu verbinden. Sie verteilt Linkkraft, signalisiert Crawlern die inhaltliche Hierarchie und macht die Nutzerführung schlüssig.

Screaming Frog zeigt dir Seiten ohne eingehende interne Links — verwaiste Seiten, die Bots womöglich nie erreichen. Das zu beheben ist ein schneller Gewinn. Mehr zur Ankertext-Strategie steht in meinem Guide zu lokalem SEO.

XML-Sitemap

Eine gut strukturierte XML-Sitemap ist eine Landkarte, die Crawlern sagt, welche Seiten Vorrang haben. Manche Seiten haben keine internen Links, die auf sie zeigen — ohne Sitemap sind sie unsichtbar. Screaming Frog kann eine bestehende Sitemap prüfen und eine neue erzeugen.

Den kompletten Ablauf eines tieferen technischen Audits beschreibe ich in meinem Guide zum technischen SEO-Audit.

URL-Kanonisierung

Wenn eine Seite über mehrere URLs erreichbar ist oder mehrere Seiten fast identische Inhalte haben, kann Google sie als Duplikate behandeln — das verwässert Linkkraft und Indexierung. Ein Canonical-Tag bündelt die Signale auf der bevorzugten Version.

Der Tab Canonicals in Screaming Frog zeigt fehlende, widersprüchliche oder selbstreferenzierende Canonicals auf einen Blick.

Meta-Tags

Meta-Descriptions wirken sich nicht direkt auf Rankings aus, aber sie beeinflussen die Klickrate in den Suchergebnissen — und in AI Overviews kann eine knappe, gut geschriebene Description direkt in das zitierte Snippet wandern. Screaming Frog markiert fehlende, doppelte oder zu lange Titel und Descriptions auf der gesamten Website in einem einzigen Crawl.

Wo du anfängst

Installation

Lade den Installer unter screamingfrog.co.uk/seo-spider herunter. Es gibt ihn für Windows, macOS und Linux. Die kostenlose Version läuft sofort — kein Konto nötig. Sie crawlt bis zu 500 URLs pro Session.

Lizenz aktivieren

Um das URL-Limit aufzuheben und den vollen Funktionsumfang zu bekommen, kaufst du eine Jahreslizenz auf der Screaming-Frog-Website (aktuelle Preise prüfen, sie ändern sich). Du erhältst einen Lizenzschlüssel, den du unter License > Enter License Key einträgst. Ein Dialog bestätigt, dass der Schlüssel gültig ist, und zeigt das Ablaufdatum.

Mach dich mit der Oberfläche vertraut

Die Menüs, die du am häufigsten brauchst:

1. File — Crawls speichern, zuletzt genutzte Sessions wieder öffnen (bis zu sechs) und Rohdaten exportieren.
2. Configuration — das wichtigste Menü. Configuration > Spider steuert, was gecrawlt wird: welche Inhaltstypen einbezogen werden, ob Nofollow-Links verfolgt werden, der JS-Rendering-Modus und mehr.
3. Bulk Export — URLs exportieren, gefiltert nach Statuscode, eingehenden Links, Direktiven, Bildern, Hreflang und weiteren Dimensionen.
4. Reports — strukturierte Reports herunterladen: Redirect-Ketten, Canonical-Fehler, Hreflang-Fehler, Pagespeed — praktisch, wenn du Probleme an ein Dev-Team übergibst.
5. Sitemaps — direkt aus einem abgeschlossenen Crawl eine XML-Sitemap erzeugen.

Das Gerät für größere Crawls vorbereiten

Arbeitsspeicher und Storage

Für kleine Websites (unter ein paar tausend URLs) reichen die Standardeinstellungen. Für größere Crawls:

• RAM-Modus (Standard): Screaming Frog reserviert 2 GB weniger als deinen gesamten Arbeitsspeicher, um Abstürze zu vermeiden. 1 GB zugewiesen bei 32 Bit, 2 GB bei 64 Bit.
• Database Storage Mode (empfohlen, wenn du eine SSD hast): Gehe zu Configuration > System > Storage und wähle Database Storage Mode. Crawls speichern automatisch, lassen sich pausieren und fortsetzen und bewältigen deutlich größere Websites, ohne an Speichergrenzen zu stoßen.

Nach dem Wechsel des Storage-Modus oder der RAM-Zuweisung musst du Screaming Frog neu starten, damit die Änderungen greifen.

JavaScript-Rendering

Wenn du eine Website crawlst, die auf React, Vue, Next.js oder einem anderen JS-Framework läuft, schalte auf JavaScript-Rendering um: Configuration > Spider > Rendering > JavaScript. Damit läuft ein Headless-Browser (auf Chromium-Basis), der JS ausführt, bevor das gerenderte HTML gecrawlt wird — genau so, wie Googlebot moderne Websites verarbeitet.

Hinweis: JS-Rendering ist deutlich langsamer als ein Standard-Crawl und braucht mehr Ressourcen. Nutze es für JS-lastige Websites, lass es bei klassischen HTML-Seiten weg.

Screaming Frog einsetzen

Einen Crawl starten

Spider-Modus (Standard): crawlt eine ganze Website ausgehend von einer Start-URL. Trage die Startseiten-URL in die Adressleiste ein und klicke auf Start.

List-Modus: crawlt nur die URLs, die du vorgibst. Praktisch, wenn du gezielt eine bestimmte Auswahl an Seiten prüfen willst (etwa alle Produktseiten oder URLs mit Performance-Einbruch aus der Google Search Console). Umschalten über Mode > List, dann eine CSV hochladen oder URLs direkt einfügen.

Während eines Crawls zeigt die Statusleiste unten in Echtzeit gecrawlte URLs, Geschwindigkeit und Antwortzeiten. Wichtig dabei:

1. Du kannst einen Crawl pausieren und fortsetzen (nur in der lizenzierten Version).
2. Beendest du die Anwendung ohne zu speichern, sind die laufenden Daten weg.
3. Im Database Storage Mode speichern Crawls automatisch.
4. Im Menü File kannst du bis zu sechs zuletzt genutzte Crawls öffnen.

Crawl-Daten ansehen

Das obere Panel gliedert die Daten in Tabs: Internal, External, Response Codes, URL, Page Titles, Meta Description, H1, H2, Images, Canonical, Pagination, Directives, Hreflang, Links, Structured Data und weitere.

Jeder Tab hat Filter-Dropdowns — unter Response Codes kannst du zum Beispiel nur 4xx (Client-Fehler) oder 3xx (Weiterleitungen) anzeigen. Klick auf eine URL im oberen Panel, und das untere Panel füllt sich mit den Details: eingehende und ausgehende Links, Bilddaten und Response-Header genau dieser URL.

Mögliche Probleme in der Overview sehen

Das Panel Overview rechts fasst die Probleme aus allen Tabs zusammen — defekte Links, fehlende Titel, doppelte H1s, Redirect-Ketten — ohne dass du jeden Tab einzeln durchklicken musst. Ein Klick auf eine Zeile in der Overview springt direkt in den passenden Tab samt Filter. Das ist der schnellste Weg, einen frischen Crawl zu triagieren.

Die Daten exportieren

• Export-Button (oberes Panel): exportiert den aktuell gewählten Tab samt Filter als CSV.
• Rechtsklick auf eine URL: wähle Inlinks, Outlinks, Image Details oder Resources, um die Beziehungsdaten dieser URL zu exportieren.
• Menü Bulk Export: exportiert tab-übergreifende Datensätze: alle Weiterleitungen, alle Canonicals, alle Bilder über einer bestimmten Dateigröße, Zusammenfassungen der Statuscodes und mehr.

Wie ein vollständiges technisches SEO-Audit mit diesen Exportdaten abläuft, steht in meinem Guide zum technischen SEO-Audit.

Crawls speichern und öffnen

Im Database Storage Mode speichern Crawls automatisch. Im RAM-Modus speicherst du manuell über File > Save Crawl, sobald der Crawl pausiert oder abgeschlossen ist.

Über die Crawl-Verwaltung kannst du gespeicherte Crawls ordnen, duplizieren, exportieren oder löschen — nützlich, wenn du dieselbe Website über die Zeit beobachten und Sessions vergleichen willst.

Was du nach dem Crawl machst

Screaming Frog liefert die Daten — es sagt dir nicht, was Priorität hat. So arbeite ich einen frischen Crawl ab:

1. Fang mit dem Overview-Panel an. Achte auf Fehler mit hohen Zahlen: 4xx-Antworten, Seiten ohne Titel, Redirect-Ketten mit mehr als einem Hop.
2. Behebe zuerst die 4xx-Fehler. Defekte interne Links verbrennen Crawl-Budget und sind Sackgassen für Nutzer. Exportieren, das richtige Ziel finden, anpassen oder weiterleiten.
3. Kürze Redirect-Ketten ein. Eine Kette wie A → B → C → D gehört zu A → D zusammengefasst. Jeder zusätzliche Hop kostet Ladezeit und kann Linkkraft verlieren.
4. Prüfe die Metadaten. Seiten mit fehlenden, doppelten oder abgeschnittenen Titeln und Descriptions sind schnelle Korrekturen mit überproportionaler Wirkung — erst recht, seit AI Overviews Meta-Inhalte direkt übernehmen.
5. Kontrolliere die Canonical-Tags. Fehlende Canonicals auf paginierten oder parametrisierten URLs erzeugen Duplicate-Content-Probleme, die sich über die Zeit aufschaukeln.
6. Finde verwaiste Seiten. Filtere im Tab Links nach Seiten ohne eingehende Links. Für Crawler sind sie unsichtbar, solange sie nicht in der Sitemap stehen.

Screaming Frog 2026 — was sich geändert hat

Das Tool selbst hat sich weiterentwickelt. Stand Anfang 2026 (den aktuellen Funktionsumfang bitte auf der Website prüfen):

• Geplante Crawls: wiederkehrende Crawls automatisieren und benachrichtigt werden, wenn Probleme auftauchen — praktisch, um Live-Websites zu überwachen, ohne manuell nachzulegen.
• Validierung strukturierter Daten: Der Tab Structured Data extrahiert und prüft JSON-LD, Microdata und RDFa gegen die Regeln von schema.org. Strukturierte Daten werden für Zitate in AI Overviews immer wichtiger.
• Core-Web-Vitals-Integration: Verbinde Google Search Console und PageSpeed Insights, um Crawl-Daten und Performance-Kennzahlen in einer Ansicht zusammenzuführen.
• Eigene JavaScript-Extraktion: Hole dir mit eigenen Extraktionsskripten beliebige Datenpunkte aus JS-gerenderten Seiten.

Screaming Frog FAQ — 2026

Lohnt sich Screaming Frog noch, wenn KI-Tools wie ChatGPT Websites prüfen können?

Ja. KI-Chats beschreiben technische SEO-Konzepte; Screaming Frog crawlt deine Website tatsächlich und liefert einen belastbaren Datensatz. Für die vollständige Liste deiner 4xx-Fehler, Redirect-Ketten und fehlenden Canonical-Tags als exportierbare CSVs gibt es keinen Ersatz. Nutze KI, um die Daten zu deuten und zu priorisieren, und Screaming Frog, um sie zu erzeugen.

Wie crawle ich eine JavaScript-lastige Website richtig?

Gehe zu Configuration > Spider > Rendering und wähle JavaScript. Damit führt eine Headless-Chromium-Instanz das JS aus, bevor gecrawlt wird. Das kommt der Verarbeitung moderner React-, Vue- und Next.js-Websites durch Googlebot am nächsten. Rechne damit, dass der Crawl 3–5-mal langsamer läuft als im Standardmodus.

Was ist der Unterschied zwischen Spider-Modus und List-Modus?

Der Spider-Modus crawlt eine ganze Website, indem er Links ab einer Start-URL folgt — dabei entdeckst du Seiten, von denen du nichts wusstest. Der List-Modus crawlt nur die URLs, die du vorgibst — sinnvoll, wenn du dein URL-Set bereits aus einer anderen Quelle hast (Search Console, ein Datenbankexport, die Sitemap eines Wettbewerbers) und keine vollständige Entdeckung brauchst.

Hilft Screaming Frog bei der Optimierung für AI Overviews?

Indirekt, aber spürbar. AI Overviews bevorzugen gut strukturierte, crawlbare Seiten mit sauberen Metadaten, gültigen strukturierten Daten und ohne technische Fehler. Der Tab zur Validierung strukturierter Daten, das Canonical-Audit und die Meta-Tag-Analyse legen genau die Probleme offen, die beeinflussen, wie KI-Systeme deine Seiten lesen und zitieren. Ob du zitiert wirst, sagt dir das Tool nicht, aber es sorgt dafür, dass technisch nichts den Weg blockiert.

Weiterlesen:

• Guide zum technischen SEO-Audit — was du mit den Exporten aus Screaming Frog machst
• So optimierst du die Ladezeit deiner Website — Core Web Vitals und Crawlbarkeit
• Surfer SEO im Überblick — Onpage-Optimierung nach dem technischen Audit

---

Dieser Guide ist Teil von alejandrorioja.com — geschrieben von Alejandro Rioja, der heute KI-Agentensysteme für Gründer baut. Inklusive des Agenten, der diese Website aktuell hält. So funktioniert es →

Was sich 2026 geändert hat

SEO sieht 2026 völlig anders aus als im Playbook der 2020er-Jahre. Drei Verschiebungen, die für alles zählen, was vor Mitte 2024 geschrieben wurde:

1. AI Overviews sind die neue Position null in den Suchergebnissen. Googles AI Overviews erscheinen standardmäßig bei rund 60 % der informationalen Suchanfragen in den USA und fressen den Großteil der Klickrate bei Was-ist- und Wie-mache-ich-Fragen. Für ein Zitat innerhalb des AI Overview zu optimieren ist inzwischen genauso wichtig wie Platz 1.
2. GEO (Generative Engine Optimization) ist der gängige Begriff für engine-übergreifende Optimierung — also dafür, in Antworten von ChatGPT, Perplexity, Claude und Gemini zitiert zu werden. In Stichprobenstudien Ende 2025 zeigten ~12 % der kommerziellen Suchanfragen mit hoher Kaufabsicht einen direkten Zitat-Traffic aus diesen Engines (vor 2023: null).
3. E-E-A-T (heute E^3-A-T, Experience + Expertise + Establishment + Authoritativeness + Trustworthiness) bleibt der Rahmen, den Google intern nutzt — Establishment kam 2024 dazu und betont Signale auf Markenebene.

Tool-Landschaft (Mai 2026): Ahrefs und Semrush haben beide Tracking für generative Engines ausgeliefert. Surfer SEO und das Umfeld rund um Topical Authority haben GEO-Scoring ergänzt. Screaming Frog ist weiterhin der Standard-Crawler. AlsoAsked, Keyword Insights und Frase haben sich stark in Richtung Snippet-Engineering für AI Overviews verschoben.

Wenn dieser Beitrag älter ist als Mai 2024, behandle seine Kernaussagen als Basis für die Google-Suche und leg das GEO-Playbook obendrauf.