Kann meine Seite indexiert werden?
Fügen Sie die Adresse einer Seite ein. Wir lesen alles, was eine Suchmaschine vor der Indexierung prüft, in derselben Reihenfolge, und sagen Ihnen, ob Google und Bing sie indexieren können und, wenn nicht, was im Weg steht. Ob sie bereits im Index ist, weiß nur die Search Console.
Wie man dieses Ergebnis liest
Eine Seite gelangt in eine Suchmaschine, indem sie fünf Prüfungen besteht, immer in derselben Reihenfolge. Die erste, die scheitert, entscheidet, und deshalb irrt sich ein Werkzeug, das nur eine davon betrachtet, so oft.
| Reihenfolge | Was die Suchmaschine prüft | Was sperrt |
|---|---|---|
| 1 | Die robots.txt der Website | eine Disallow-Regel für die Adresse oder ein Serverfehler bei der Datei selbst |
| 2 | Der HTTP-Status der Seite | 404, 410, 500 und jeder andere Fehler; eine Weiterleitung übergibt die Prüfung an die Zielseite |
| 3 | Der Header X-Robots-Tag | noindex oder none, für alle Crawler oder für diesen |
| 4 | Das Meta-Robots-Tag | noindex oder none, in robots, googlebot oder bingbot |
| 5 | Der Canonical | eine andere Adresse als die richtige genannt: Die Suchmaschine indexiert eher diese |
Die häufigste Falle: robots.txt und noindex zusammen
Um eine Seite aus den Ergebnissen zu entfernen, setzen viele ein noindex und sperren sie vorsichtshalber auch in der robots.txt. Die Suchmaschine darf die Seite dann nicht mehr herunterladen, sieht das noindex nie und kann die Adresse unbegrenzt weiter anzeigen. Richtig ist das Gegenteil: die Seite crawlbar lassen, mit ihrem noindex, bis sie verschwindet.
„Nichts verhindert die Indexierung“ heißt nicht „indexiert“
Dieses Werkzeug prüft technische Hindernisse. Es weiß nicht, ob Google beschlossen hat, die Seite zu behalten: Eine Suchmaschine verwirft auch Seiten, die zu dünn sind, einer anderen zu ähnlich, oder zu denen kein Link führt. Für diese Antwort zählt allein die Search Console.
Die Gründe der Search Console, und was dieses Tool davon prüft
Der Bericht zur Seitenindexierung in der Search Console ordnet jede ausgeschlossene Adresse einem Grund zu. Die Gründe mit technischer Ursache lassen sich hier prüfen, ohne Zugang zum Konto, und das Ergebnis oben zeigt, ob die Ursache noch besteht:
| Grund in der Search Console | Was dieses Tool prüft |
|---|---|
| Durch „noindex“-Tag ausgeschlossen, oder URL als „noindex“ markiert | das Meta-Robots-Tag und der X-Robots-Tag-Header, für Googlebot wie für Bingbot |
| URL wird von der robots.txt-Datei blockiert | die Regel der robots.txt, die die Adresse trifft, Gruppe für Gruppe |
| Indexiert, obwohl durch robots.txt-Datei blockiert | dieselbe Sperre: Google kennt die Adresse über Links, darf sie aber nicht lesen |
| Alternative Seite mit richtigem kanonischen Tag | das Canonical und der Zustand der Seite, auf die es zeigt |
| Seite mit Weiterleitung | jeder Sprung der Kette bis zur Zielseite |
| Nicht gefunden (404), Serverfehler (5xx) | der HTTP-Status der Seite |
| Gecrawlt - zurzeit nicht indexiert; Gefunden - zurzeit nicht indexiert | nichts Technisches: Es ist eine Entscheidung der Suchmaschine. Findet das Tool kein Hindernis, liegt die Ursache im Inhalt oder in der internen Verlinkung. |
Was dieses Werkzeug nicht tut
- Es sagt nicht, ob die Seite tatsächlich indexiert ist: Es sagt, ob etwas sie daran hindert. Nur die Search Console kennt die Antwort.
- Es sieht nicht, was aus der Seite wird, wenn JavaScript läuft: Eine von einem Skript gebaute Seite wird gemeldet, nicht gerendert.
- Es prüft nicht, ob die Seite in der Sitemap steht: Sie vollständig zu lesen kostete Dutzende Anfragen für ein Häkchen.
Häufige Fragen
Meine Seite ist überall erlaubt, erscheint aber nicht bei Google. Warum?
Weil die Erlaubnis nicht reicht. Google hat sie vielleicht noch nicht entdeckt (kein Link zeigt auf sie, sie steht nicht in der Sitemap), sie für einer anderen Seite zu ähnlich gehalten oder für zu dünn, um sie zu behalten. Die Search Console sagt unter „Seiten“, welcher Grund zutrifft.
Was unterscheidet robots.txt und noindex?
Die robots.txt verbietet, die Seite zu lesen; noindex verbietet, sie in den Ergebnissen zu behalten. Damit ein noindex wirkt, muss die Suchmaschine die Seite lesen können: Beides lässt sich nicht kombinieren.
Was ist der Header X-Robots-Tag?
Eine Indexierungsanweisung, die der Server mit der Seite schickt, statt dass sie darin steht. Sie bewirkt genau dasselbe wie ein Meta-Robots-Tag, ist aber im Quelltext nicht zu sehen: Deshalb überlebt ein vergessenes noindex der Testumgebung so oft den Livegang.
Beachtet Google den Canonical immer?
Nein, er ist ein Hinweis, kein Befehl. Google folgt ihm fast immer, wenn er stimmig ist, und ignoriert ihn, wenn er auf eine fehlerhafte Seite, eine noindex-Seite oder eine fremde Seite zeigt. Ein Canonical auf sich selbst kostet nichts und beseitigt jede Mehrdeutigkeit.
Wie erfahre ich, ob meine Seite wirklich bei Google indexiert ist?
Die offizielle Antwort steht in der Search Console: Fügen Sie die Adresse oben in die Leiste der URL-Prüfung ein, und sie sagt, ob die Seite im Index ist und, wenn nicht, warum. Ohne Zugang zum Konto gibt eine Suche mit site: und der genauen Adresse einen Hinweis: Erscheint die Seite, ist sie indexiert; erscheint sie nicht, beweist das nichts. Dieses Tool beantwortet die Frage davor: Wenn sie nicht im Index ist, hält ein technisches Hindernis sie fern?
Was bedeutet „Gecrawlt - zurzeit nicht indexiert“?
Dass Google die Seite gelesen und beschlossen hat, sie vorerst nicht aufzunehmen. Kein technisches Hindernis ist im Spiel: Es ist ein Urteil über die Seite, meist zu dünner Inhalt, zu große Nähe zu einer anderen Seite oder zu wenige interne Links. „Gefunden - zurzeit nicht indexiert“ bedeutet, dass Google die Adresse kennt, sie aber noch nicht gelesen hat. Findet dieses Tool in beiden Fällen kein Hindernis, arbeiten Sie am Inhalt und an der internen Verlinkung, nicht an der Technik.
Wie beantrage ich bei Google die Indexierung meiner Seite?
Prüfen Sie die Adresse in der Search Console und klicken Sie auf „Indexierung beantragen“: Google nimmt sie in die Crawling-Warteschlange auf, ohne zu versprechen, sie zu behalten. Für Bing können Sie Adressen in den Bing Webmaster Tools einreichen, und das Protokoll IndexNow erledigt das aus den meisten CMS automatisch. Prüfen Sie hier zuerst, dass nichts die Seite blockiert: Für eine Seite mit noindex die Indexierung zu beantragen, bringt nichts.
Die anderen Werkzeuge
robots.txt testen
Ob die robots.txt der Website diese Adresse zum Crawlen freigibt.
robots.txt-Generator
Eine robots.txt für Ihre Website, KI-Crawler inklusive, vor der Veröffentlichung getestet.
Google- und Social-Media-Vorschau
Ihr Titel und Ihre Beschreibung so, wie Google, Bing, Facebook, LinkedIn, X und WhatsApp sie anzeigen werden, in Pixeln gemessen.
Erfahren, an welchem Tag eine Seite nicht mehr indexierbar ist
Mit dem Business-Tarif liest Expansel Ihre Seiten bei jedem Überwachungsdurchlauf neu und schreibt Ihnen an dem Tag, an dem eine Veröffentlichung ein noindex setzt, die robots.txt schließt, den Canonical ändert oder den Title entfernt.