2021 kam ein kleines Anwaltsbüro aus Manchester zu Seahawk, nachdem ihr Blog vier Monate lang tot in der Search Console gelegen hatte. Dreiundvierzig Beiträge. Null indexiert. Alle zeigten „Crawled, currently not indexed." Die vorherige Agentur hatte nur mit den Schultern gezuckt und ihnen gesagt, Google sei „einfach langsam." Ich öffnete die Website an einem Nachmittag und hatte die Grundursache innerhalb von neunzig Minuten gefunden. Dünne Inhalte, doppelte Meta-Beschreibungen auf den Praxisbereich-Seiten, die in das Blog-Crawl-Budget flossen, und eine falsch konfigurierte Yoast-Sitemap, die auf noindexierte Kategorie-Archive verwies.
Der Satz „Crawled, currently not indexed" ist einer der frustrierendsten Status, den Google Search Console dir zeigen kann. Er bedeutet, dass Google die Seite gefunden hat. Es hat Ressourcen aufgewendet, um sie herunterzuladen. Und dann hat es sich angesehen, was dort war, und gesagt: nicht der Mühe wert. Zu verstehen, warum Google diese Entscheidung trifft, und sie systematisch zu beheben, musste ich mir auf über 12.000 Websites zur Perfektion aneignen.
---
Was „Crawled Currently Not Indexed" wirklich bedeutet
Es gibt ein weit verbreitetes Missverständnis, dass dieser Status bedeutet, dass Google noch nicht dazu gekommen ist, die Seite zu indexieren. Das ist nicht, was es bedeutet. Google hat die URL gecrawlt. Es hat eine bewusste Entscheidung getroffen, sie nicht in den Index aufzunehmen. Das ist ein völlig anderes Problem, und es erfordert eine andere Reaktion.
Die zwei breiten Ursachen sind Qualitätssignale und technische Signale. Qualitätssignale: Google denkt, dass die Seite nicht genug Wert für Nutzer bietet. Technische Signale: Etwas in deinem Setup verwirrt Googlebot oder widerspricht deiner Absicht. Beide sind behebbar. Keine der beiden behebt sich selbst.
Es lohnt sich, Googles eigene Dokumentation zu lesen, wie Google Search funktioniert, wenn du die Pipeline vom Crawl zum Index verstehen möchtest. Es ist trocken, aber nützlich.
---
Schritt 1: Das vollständige Bild in der Search Console abrufen
Spekuliere nicht. Öffne Google Search Console und gehe zu Seiten (ehemals Coverage). Filtere nach „Crawled, currently not indexed." Exportiere die Liste. Du möchtest den vollständigen URL-Satz, nicht nur eine Stichprobe.
Dann gleiche ich diese Liste mit einem Screaming Frog-Crawl derselben Website ab. Jedes Mal. Screaming Frog zeigt dir die Wortanzahl der Seite (über die benutzerdefinierte Extraktion oder die integrierten Lesbarkeitsmetriken), ob sie in der XML-Sitemap enthalten ist, ihren Canonical-Tag-Status, ihre Meta-Robots-Direktive, die Anzahl der internen Links zur Seite und den Response-Code. Diese Kombination sagt dir das meiste, was du brauchst.
Worauf ich zuerst schaue
- Seiten mit weniger als 300 Wörtern Body-Text
- Seiten mit identischen oder nahezu identischen Meta-Beschreibungen zu anderen indexierten Seiten
- Seiten, die nicht in der XML-Sitemap enthalten sind
- Seiten, die keine internen Links erhalten
- Verwaiste Pagination-URLs oder dünne Archiv-Seiten, die gecrawlt werden
Im Fall der Manchester-Anwälte hatten die Blog-Beiträge durchschnittlich 180 Wörter. Das war das Kernproblem. Alles andere war sekundär.
---
Das Qualitätsproblem: Google denkt, deine Seite ist nicht gut genug
Das ist unangenehm zu hören, aber es ist die häufigste Ursache, die ich sehe. Googles Qualitätsschwelle hat sich seit 2022 erheblich verschoben. Seiten, die vor drei Jahren stillschweigend im Index lagen, werden jetzt aktiv ausgeschlossen.
dünne Inhalte
Wenn eine Seite weniger als 400–500 Wörter hat und keine starken E-E-A-T-Signale aufweist (Autorenbiografie, Zitate, originärer Einblick), wird Google sie oft crawlen und parken. Das habe ich besonders bei Folgendem beobachtet:
- WooCommerce-Produktseiten mit wörtlich kopierten Herstellertexten
- Immobilienangebote mit zweizeiligen Objektbeschreibungen
- Standortseiten aus einer Vorlage, bei der nur der Stadtname ausgetauscht wurde
- Alte FAQ-Seiten, die eine Frage in einem Absatz beantworten
Die Lösung ist nicht einfach, mehr Wörter hinzuzufügen. Fülltext macht es schlimmer. Die Lösung ist, nützliche, spezifische Informationen hinzuzufügen, die ein Mensch tatsächlich lesen möchte. Für die Rechtsanwälte habe ich ihre Blogbeiträge umgeschrieben und echte Fallausgänge (anonymisiert), spezifische britische Gesetzesverweise und durchgerechnete Beispiele eingefügt. Die Wortanzahl stieg von 180 auf 900. Acht Wochen später waren einunddreißig von dreiundvierzig Beiträgen indexiert.
Doppelte und nahezu doppelte Inhalte
Der Doppelinhaltsbericht von Screaming Frog ist dein Freund. Aber führe die URLs auch durch Copyscape oder Siteliner, wenn du dir über Cross-Site-Duplikate Sorgen machst. Ich hatte Kunden im E-Commerce-Bereich, bei denen der Lieferant die gleiche Produktbeschreibung an vierzig andere Einzelhändler lieferte. Google indexiert eine und ignoriert den Rest. Das ist kein Fehler, das ist beabsichtigtes Verhalten.
Interne Verdoppelungen sind tückischer. Wenn du eine Website mit Serviceseiten für „Klempner in Leeds", „Klempner in Sheffield", „Klempner in Bradford" hast und sie zu 95 % identisch sind, außer dem Stadtnamen, wird Google eine auswählen und die anderen unterdrücken. Ich habe gesehen, wie dieses Muster ganze Faceted-Search-Systeme in „Gecrawlt, derzeit nicht indexiert"-Hölle trieb.
---
Das technische Problem: Deine Einrichtung sendet gemischte Signale
Manchmal ist der Inhalt wirklich gut und Google weigert sich trotzdem zu indexieren. Dann gräbst du in technische Signale ein.
Canonical-Tag-Verwirrung
Das ist der häufigste technische Schuldige, den ich finde. Eine Seite ist auf sich selbst kanonisiert (korrekt), aber irgendwo vorgelagert hat eine Kategorieseite oder eine paginierte URL einen Canonical, der auf die Seite verweist, die du indexiert haben möchtest. Google interpretiert das manchmal als Signal, dass die kanonische Quelle ein Duplikat ist. Ich habe WordPress-Themes gesehen, die das automatisch auf Weisen tun, die ohne einen Crawl wirklich schwer zu erkennen sind.
Prüfung: Haben alle Seiten in deiner Liste „Gecrawlt, derzeit nicht indexiert" einen selbstreferenzierenden Canonical? Verweist sonst etwas auf der Website unerwartet auf diese URLs?
XML-Sitemap-Probleme
Deine Sitemap sollte nur URLs auflisten, die du aktiv indexiert haben möchtest. Das klingt offensichtlich. In der Praxis werden Yoast, Rank Math und die meisten anderen SEO-Plugins munter noindexierte Seiten, paginierte URLs und Tag-Archive in deine Sitemap aufnehmen, wenn du nicht aufpasst. Google sieht eine URL in deiner Sitemap, crawlt sie, findet einen noindex oder dünne Inhalte, und das ist eine verschwendete Crawl-Gutschrift plus ein Vertrauenssignal, dass du nicht wirklich weißt, was du mit deiner Website tust.
Ich prüfe Sitemaps mit einem einfachen Prozess:
- Lade die Sitemap-XML herunter
- Importiere jede URL in eine Tabellenkalkulation
- Führe jede URL durch Screaming Frog aus (oder nutze den Massen-Export)
- Kennzeichne jede URL, die noindexiert ist, umleitet oder einen anderen Status als 200 zurückgibt
- Entferne diese URLs aus der Sitemap
Das allein hat für drei Kunden im letzten Jahr den Status „Gecrawlt, derzeit nicht indexiert" geklärt. Ohne den Inhalt überhaupt anzutasten.
Lücken bei internen Links
PageRank (ja, immer noch relevant, ja, auch 2024) fließt durch interne Links. Eine Seite ohne interne Links, die auf sie verweisen, ist für Googlebot praktisch unsichtbar in Bezug auf Autorität. Google kann sie über die Sitemap crawlen und dann entscheiden, dass sie nicht wichtig genug zum Indexieren ist, weil nichts auf der Website auf sie verweist.
Verwaiste Seiten sind häufig. Ich nutze den Screaming Frog-Report „Orphan URLs" (unter Site Structure), um sie zu finden. Füge drei bis fünf relevante interne Links zu jeder Seite hinzu, die im Bucket „not indexed" sitzt, und du wirst oft innerhalb von vier bis sechs Wochen Bewegung sehen.
---
Crawl Budget: Wenn es wirklich ein Kapazitätsproblem ist
Bei kleineren Websites (unter 1.000 Seiten) ist Crawl Budget fast nie das echte Problem. Ich weiß, dass viele diese Erklärung häufig verwenden. Aber bei großen E-Commerce-Seiten (wir hatten einen Fashion-Retailer bei Seahawk mit 80.000 SKUs) spielt es wirklich eine Rolle.
Wenn Googlebot seine Besuche damit verbringt, deine unendliche facettierte Navigation, deine Session-ID-Parameter oder deine internen Suchergebnis-Seiten zu crawlen, kommt es nicht zu den Produktseiten, die wirklich zählen. Die Google-Dokumentation zu Crawl Budget ist eines der wenigen offiziellen SEO-Leitfäden, den ich wirklich von Anfang bis Ende empfehlen würde.
Lösung: Blockiere URL-Parameter, die nahezu doppelte Seiten erzeugen, über das URL Parameters Tool (wenn du noch die alte Search Console verwendest) oder über robots.txt für Googlebot, und stelle sicher, dass deine internen Suchseiten noindexiert sind. Das gibt Crawl-Kapazität für die Seiten frei, die zählen.
---
Indexierung anfordern: Wann du es nutzt und wann nicht
Der Button „Indexierung anfordern" in der Search Console ist nützlich für hochpriorisierte einzelne URLs, nachdem du Änderungen vorgenommen hast. Es ist kein Ersatz für die Behebung der Grundursache. Ich sehe Freelancer, die diesen Button zwanghaft auf Seiten drücken, die sie nicht angefasst haben. Es tut nichts von selbst.
Meine Regel: erst beheben, dann anfordern. Nachdem du substantielle Änderungen am Inhalt, an Canonical Tags oder beim internen Linking vorgenommen hast, reiche die URL über das URL Inspection Tool ein. Gib ihr zwei bis vier Wochen Zeit. Falls sie danach immer noch nicht indexiert ist, ist das Grundproblem noch nicht behoben.
Noch eine Sache: Das Kontingent für Indexierungsanfragen ist begrenzt. Verbrauche es nicht für Seiten, die immer noch dünne Inhalte oder fehlerhafte Canonical-Setups haben. Du fragst Google nur, seine eigene Entscheidung zu bestätigen.
---
Wie lange dauert es, bis es gelöscht ist?
Ehrlich gesagt variiert es mehr als die meisten SEO-Leitfäden zugeben. Ich habe gesehen, dass Seiten innerhalb von fünf Tagen nach einem Content-Update von „Crawled, currently not indexed" zu indexiert wechselten. Andere haben zwölf Wochen gedauert. Die Faktoren, die am meisten zu zählen scheinen:
- Wie viel Autorität die Domain insgesamt hat (ältere, verlinkte Domains sehen schnellere Neubewertungen)
- Ob die Behebung inhaltsbezogen (langsamer) oder technisch (schneller) war
- Wie oft Googlebot die Website besucht (prüfe den Crawl Stats Report in der Search Console)
Erstelle ein Tracking-Spreadsheet. Notiere das Datum, an dem du Änderungen vorgenommen hast. Prüfe alle zwei Wochen in der Search Console nach. Keine Panik, wenn in Woche eins nichts passiert.
---
FAQ
Warum crawlt Google eine Seite und indexiert sie dann nicht?
Crawling und Indexierung sind separate Schritte in Googles Pipeline. Crawling bedeutet nur, dass Googlebot die Seite heruntergeladen hat. Indexierung bedeutet, dass Google entschieden hat, es lohnt sich, sie in den Suchergebnissen anzuzeigen. Die Lücke entsteht, wenn Googles Qualitätsbewertung feststellt, dass die Seite nicht genug Wert hinzufügt, vorhandene Inhalte im Index dupliziert oder widersprüchliche Signale enthält, wie etwa ein noindex-Tag irgendwo in der Kette.
Garantiert das Einreichen einer URL in der Search Console die Indexierung?
Nein. Es platziert die URL in eine Prioritätswarteschlange zur Überprüfung, aber Google trifft seine eigene Qualitätsentscheidung. Falls die Seite dünne Inhalte oder technische Probleme hat, beschleunigt das Einreichen nur, dass Google bestätigt, dass es sie nicht indexieren wird.
Kann eine Seite indexiert werden, nachdem sie lange in diesem Status hängengeblieben ist?
Ja, absolut. Ich habe URLs bereinigt, die über ein Jahr lang in „Crawled, currently not indexed" festgesteckt waren, sobald der Inhalt ordnungsgemäß verbessert wurde. Google bewertet neu. Es ist keine permanente Blacklist. Das heißt: Falls eine Seite länger als sechs Monate in diesem Status ist, lohnt es sich, ehrlich zu fragen, ob sie überhaupt indexiert werden sollte.
Ist dieser Status dasselbe wie „Discovered, currently not indexed"?
Nein, und die Unterscheidung ist wichtig. „Discovered, currently not indexed" bedeutet, dass Google die URL kennt, sie aber noch nicht gecrawlt hat. Es ist oft ein Crawl Budget- oder internes Link-Problem. „Crawled, currently not indexed" bedeutet, dass sie bereits bewertet und beiseitegelegt wurde. Beide brauchen Aufmerksamkeit, aber die Lösungen sind etwas unterschiedlich.
---
Es gibt keine universelle Wunderwaffe gegen „Gecrawlt, aktuell nicht indexiert." In meiner Erfahrung ist es fast immer ein Problem mit der Inhaltsqualität oder ein technisches Signal-Problem – und meistens eine Kombination aus beiden. Beginnen Sie mit den Daten, beheben Sie, was Sie finden, und geben Sie es Zeit. Google versucht nicht, Sie zu bestrafen. Es braucht einfach einen Grund, sich um die Seite zu kümmern. Geben Sie ihm einen.