Handbuch · Kapitel 02

Erster Crawl: ganze Website oder URL-Liste

Adresse eingeben, „Ganze Website“ oder „URL-Liste“ wählen und die Biene losschicken. Was während des Crawls passiert und wenn er fertig ist.

2 Min. LesezeitAktualisiert am 21.10.2026

Ganze Website oder URL-Liste

Auf dem Startbildschirm wählen Sie einen von zwei Modi:

ModusWas er machtWann Sie ihn nutzen
Ganze WebsiteBeginnt bei der eingegebenen Adresse und folgt jedem internen Link, bis alle Seiten erfasst sind.Website-Audit, defekte Links finden, Sitemap vorbereiten.
URL-ListePrüft nur die Adressen, die Sie einfügen oder aus einer Datei laden, ohne Links zu folgen.Weiterleitungen nach einer Migration prüfen, eine Liste aus der Search Console prüfen.

Crawl starten

  1. Geben Sie die Adresse ein, mit https://, z. B. https://beispiel.de. Leitet die Website auf www weiter oder umgekehrt, erkennt der Crawler das und meldet es.
  2. Prüfen Sie die Einstellungen, falls die Standardwerte nicht passen: Tiefenlimit, Geschwindigkeit, JavaScript. Für den ersten Crawl reichen die Standardwerte. Mehr dazu unter Konfiguration.
  3. Klicken Sie auf Starten.

Während des Crawls

Die Tabelle füllt sich in Echtzeit, und oben sehen Sie, wie viele URLs verarbeitet sind und wie viele noch warten. Sie können den Crawl pausieren und später fortsetzen, mit der gespeicherten Datei sogar nach dem Schließen der App.

Gehen Sie schonend mit dem Server um. Bei kleinem Hosting senken Sie die Zahl gleichzeitiger Anfragen. Liefert der Server 429 oder 503, bremst der Crawler von selbst ab. Besser ist aber, es gar nicht so weit kommen zu lassen.

Nach dem Crawl

Zum Schluss fliegt die Biene noch einmal über alles, was sie gesammelt hat, und berechnet, was man auf einer einzelnen Seite nicht sieht: Inlinks, verwaiste Seiten, Duplikate, Weiterleitungsketten und Hreflang-Rückverweise. Erst dann sind die Zahlen in den Tabs endgültig.

Rechts sehen Sie die Übersicht mit der Zahl der URLs pro Tab und Filter und darunter die Liste der Probleme, nach Wichtigkeit sortiert. Zu jedem Problem gibt es eine kurze Erklärung, was es bedeutet und wie Sie es beheben.

Weiter: Tabs und Filter lesen.