Screaming Frog Einsteiger-Guide: Dein erstes Website-Audit

Warum Screaming Frog für SEO unverzichtbar ist

Screaming Frog simuliert, wie Googlebot deine Website crawlt. Das Tool besucht sequenziell alle Seiten deiner Domain, folgt internen und externen Links und sammelt dabei Hunderte von Datenpunkten pro URL: HTTP-Status, Seitentitel, Meta-Descriptions, H1-Tags, Canonical-URLs, Noindex-Status, interne und externe Links, Bilder, JavaScript-Ressourcen und vieles mehr.

Ohne ein solches Crawling-Tool hast du keinen objektiven Blick darauf, was Google tatsächlich auf deiner Website sieht. Die Kombination aus Screaming Frog für den Crawl und LinkJuice für die interne Verlinkungsanalyse ist der Industriestandard für professionelle SEO-Audits: Screaming Frog liefert die Rohdaten, LinkJuice macht daraus eine priorisierte Handlungsliste.

Grundlagen: Was ist Screaming Frog?

Screaming Frog SEO Spider ist eine Desktop-Applikation, die für Windows, macOS und Linux verfügbar ist. Die kostenlose Version crawlt bis zu 500 URLs – ausreichend für kleine Websites. Die kostenpflichtige Lizenz für etwa 209 Euro pro Jahr ermöglicht unbegrenzte Crawls und bietet zusätzliche Funktionen wie JavaScript-Rendering, Google Analytics-Integration und automatische Sitemaps.

Wichtige Grundbegriffe: Ein Crawl ist der Prozess, bei dem Screaming Frog alle URLs einer Domain besucht und Daten sammelt. Ein Spider (oder Crawler) ist das Programm, das die Links verfolgt und neue URLs entdeckt. Der Inlinks-Bericht zeigt für jede URL alle eingehenden internen Links – das ist der Bericht, den du für die PageRank-Analyse in LinkJuice benötigst.

Schritt-für-Schritt: Erster Screaming Frog Crawl

Schritt 1: Download und Installation

Lade Screaming Frog von der offiziellen Website screamingfrog.co.uk herunter. Die Installation ist unkompliziert: Installer ausführen, Lizenzvereinbarung bestätigen, fertig. Du benötigst eine aktuelle Java-Version auf deinem System – Screaming Frog weist dich darauf hin, wenn Java fehlt oder veraltet ist. Nach der Installation öffnest du Screaming Frog und siehst die Hauptoberfläche mit einer URL-Eingabezeile oben.

Schritt 2: Crawl konfigurieren

Vor dem ersten Crawl empfehlen sich einige grundlegende Einstellungen. Öffne „Configuration" > „Spider" und stelle sicher, dass folgende Optionen aktiviert sind: „Crawl all subdomains" (falls relevant), „Check images" (für Bild-Audit) und „Check CSS, JavaScript, SWF" (für Ressourcen-Analyse). Für den reinen SEO-Crawl reichen die Standard-Einstellungen meistens aus.

Unter „Configuration" > „User Agent" kannst du festlegen, als welcher User Agent Screaming Frog crawlt. Für technische SEO-Audits empfiehlt sich der Screaming-Frog-User-Agent – wechsle nur zum Googlebot-User-Agent, wenn du explizit testen willst, was Googlebot sieht.

Schritt 3: Crawl starten

Gib die Start-URL deiner Website in die URL-Leiste ein (z. B. https://beispiel.de) und klicke auf „Start". Screaming Frog beginnt den Crawl und zeigt in Echtzeit, welche URLs verarbeitet werden. Du siehst in der unteren Leiste den Crawl-Fortschritt: wie viele URLs gecrawlt wurden, wie viele noch ausstehen und die aktuelle Crawl-Rate (URLs pro Minute).

Für kleine Websites bis 1.000 Seiten dauert der Crawl in der Regel wenige Minuten. Große Websites können mehrere Stunden benötigen. Du kannst den Crawl pausieren und später fortsetzen.

Schritt 4: Wichtigste Berichte verstehen

Nach dem Crawl stehen dir verschiedene Berichte und Tabs zur Verfügung. Die wichtigsten für SEO:

Response Codes: Filtere nach 4xx (defekte Links), 3xx (Redirects) und 5xx (Serverfehler). Jeder Eintrag in diesen Kategorien ist ein potenzielles Problem.

Page Titles: Zeigt alle Seitentitel. Filtere nach „Missing", „Duplicate" und „Over 60 Characters" für schnelle Optimierungsmöglichkeiten.

Meta Description: Analog zu Page Titles – fehlende oder duplizierte Meta-Descriptions sind häufige Probleme.

H1: Jede Seite sollte genau eine H1 haben. Screaming Frog zeigt fehlende und duplizierte H1-Tags.

Inlinks: Der wichtigste Bericht für die interne Verlinkungsanalyse. Zeigt für jede URL alle eingehenden internen Links mit Quell-URL, Ankertext und Follow-Status.

Schritt 5: CSV für LinkJuice exportieren

Für den Import in LinkJuice benötigst du den „All Inlinks"-Export. Navigiere in Screaming Frog zu „Reports" > „All Inlinks" und klicke auf „Export". Speichere die Datei als CSV. Diese CSV enthält alle internen Links deiner Website mit Quell-URL, Ziel-URL, Ankertext und HTTP-Status – genau die Daten, die LinkJuice für die PageRank-Berechnung benötigt.

Best Practices und Expertentipps

Erfahrene SEO-Profis führen Screaming-Frog-Crawls immer mit einer sauberen Konfiguration durch: JavaScript-Rendering deaktiviert, wenn die Website kein JavaScript für die Navigation benötigt; Crawl auf die Hauptdomain begrenzt, ohne Subdomains; maximale Crawl-Rate angepasst an die Server-Kapazität der Website.

Ein bewährter Workflow: Screaming Frog läuft monatlich automatisiert über die Schedule-Funktion (kostenpflichtige Version), exportiert automatisch die Inlinks-CSV und lädt sie in LinkJuice hoch. Dieser automatisierte Prozess stellt sicher, dass du stets aktuelle Crawl-Daten für deine interne Verlinkungsanalyse hast.

• Speichere Crawl-Konfigurationen als Preset für wiederkehrende Audits: „File" > „Save As"
• Vergleiche zwei Crawls direkt in Screaming Frog: „Reports" > „Compare Crawls" zeigt Änderungen zwischen zwei Zeitpunkten
• Nutze die Custom Search-Funktion, um spezifische Fehler auf deiner Website zu finden (z. B. bestimmte Textbausteine)
• Aktiviere Google Analytics-Integration, um Crawl-Daten mit Traffic-Daten zu kombinieren

Häufige Anfängerfehler bei Screaming Frog

Der häufigste Anfängerfehler: die kostenlose Version bei großen Websites einsetzen und sich wundern, warum nur 500 URLs gecrawlt werden. Die kostenlose Lizenz zeigt kein Fehler an – sie stoppt einfach bei 500. Für ein aussagekräftiges Audit einer Website mit mehr als 500 Seiten ist die kostenpflichtige Lizenz notwendig.

Ein weiterer Fehler ist das Crawlen mit zu hoher Rate auf langsamen Servern. Wenn Screaming Frog 50 oder mehr gleichzeitige Anfragen sendet und der Server nicht schnell genug reagiert, kumulieren sich 5xx-Fehler im Crawl – obwohl die Seiten eigentlich erreichbar sind. Reduziere die Crawl-Rate unter „Configuration" > „Speed" auf einen realistischen Wert für deinen Zielserver.

Fazit und nächste Schritte

Screaming Frog ist das Fundament jedes professionellen SEO-Audits. Mit der kostenlosen Version und deiner ersten Website bist du in weniger als 30 Minuten für deinen ersten Crawl bereit – und hast danach eine solide Datenbasis für alle weiteren Optimierungsmaßnahmen.

Nach dem Crawl ist der nächste Schritt der Import der Inlinks-CSV in LinkJuice. In wenigen Minuten siehst du die PageRank-Verteilung deiner Website und kannst sofort erkennen, welche Seiten zu wenig interne Verlinkung erhalten und wo die größten SEO-Potenziale liegen.

• Screaming Frog herunterladen und installieren
• Ersten Crawl der eigenen Website starten
• Response-Codes-Bericht auf 4xx-Fehler prüfen
• „All Inlinks"-CSV exportieren und in LinkJuice importieren