Indexierung
Auch: Indexing, Indexing in der Suchmaschine
Indexierung ist der Schritt, in dem eine Suchmaschine eine gecrawlte Seite analysiert und in ihrem Index speichert, der Datenbank für ihre Suchergebnisse. Nur indexierte Seiten können dort erscheinen; einen Anspruch darauf gibt es nicht.
Eine Seite kann online, fehlerfrei und gut geschrieben sein und trotzdem in keiner Suche auftauchen. Der Grund liegt dann meist an der Schwelle zwischen Abruf und Ergebnis: Die Seite wurde nicht oder noch nicht indexiert.
Dieser Eintrag erklärt die Indexierung anhand der Google-Dokumentation: was in dieser Phase mit einer Seite passiert, wie Sie die Meldungen der Search Console einordnen, welche Hebel Sie haben und warum das Thema auch für Backlinks und KI-Antworten zählt.
Vom Crawl in den Index: drei Phasen, keine Garantie
Google beschreibt die Suche in drei Phasen: Crawling, Indexierung und Bereitstellung der Ergebnisse (Google: Funktionsweise der Google Suche). Beim Crawling lädt ein Crawler Text, Bilder und Videos einer Seite herunter. Bei der Indexierung analysiert Google diese Inhalte und speichert die Informationen im Google-Index. Erst aus diesem Index wählt die Suche später die Ergebnisse für eine Anfrage aus.
Vor dem Crawling steht die URL-Erkennung. Ein zentrales Verzeichnis aller Webseiten gibt es nicht, Google muss neue Adressen selbst finden: über Links von bereits bekannten Seiten, etwa einer Kategorieseite, die auf einen neuen Beitrag verweist, oder über eine eingereichte Sitemap.
Wichtig ist der Satz, den Google seiner Beschreibung voranstellt: Nicht alle Seiten durchlaufen alle drei Phasen, und Google garantiert weder Crawling noch Indexierung noch Ausspielung. Zahlungen für häufigeres Crawling oder bessere Rankings nimmt Google nach eigener Aussage nicht an.
Indexiert heißt nicht sichtbar. Eine indexierte Seite kann in den Ergebnissen erscheinen, muss es aber nicht. Ob und wo sie auftaucht, entscheidet das Ranking bei jeder einzelnen Suche neu, abhängig von Anfrage, Standort, Sprache und Gerät. Indexierung ist die Eintrittskarte, keine Platzierung.
Was beim Indexieren mit einer Seite passiert
Die Indexierung beginnt eigentlich schon beim Abruf. Google rendert die Seite ähnlich wie ein aktueller Chrome-Browser und führt dabei JavaScript aus. Ohne diesen Schritt blieben Inhalte unsichtbar, die erst per Script auf die Seite kommen. Danach folgt die eigentliche Analyse:
- Inhalte verstehen: Google verarbeitet den Text, wichtige Elemente wie den
<title>und ALT-Attribute, außerdem Bilder und Videos. - Duplikate bündeln: Seiten mit ähnlichem Inhalt fasst Google zu einer Gruppe zusammen und wählt die Seite, die sie am besten vertritt. Diese kanonische Seite kann in den Ergebnissen erscheinen, die übrigen gelten als alternative Versionen. Wie Sie diese Wahl beeinflussen, beschreibt der Eintrag zum Canonical-Tag.
- Signale erfassen: Zur kanonischen Seite speichert Google Angaben wie Sprache, Land und Nutzerfreundlichkeit, die später beim Ranking eine Rolle spielen können.
- Mobile Version zuerst: Für Indexierung und Ranking verwendet Google die mobile Fassung einer Seite, abgerufen mit dem Smartphone-Crawler. Fehlen mobil Inhalte, die nur auf dem Desktop stehen, fehlen sie auch im Index.
Daraus folgt eine Unterscheidung, die in Diskussionen oft verwischt: Gecrawlt bedeutet nur, dass Google die Seite abgerufen hat. Indexiert bedeutet, dass Google sie verarbeitet und als kanonische Fassung aufgenommen hat. Dazwischen liegt eine Entscheidung, die Google trifft, nicht der Betreiber.
Warum Seiten nicht in den Index kommen
Die Search Console zeigt im Bericht zur Seitenindexierung für jede nicht indexierte URL einen Grund (Search-Console-Hilfe: Bericht zur Seitenindexierung). Google betont dort selbst, dass „nicht indexiert“ nicht automatisch ein Problem ist. Die häufigsten Meldungen lassen sich in drei Gruppen ordnen:
| Meldung in der Search Console | Was sie laut Google bedeutet | Handlungsbedarf |
|---|---|---|
| Duplikat oder alternative Seite mit kanonischem Tag | Google hat eine andere URL als Hauptfassung indexiert | meist keiner, nur prüfen, ob die richtige URL gewählt wurde |
| Seite mit Weiterleitung | die URL leitet weiter, indexiert wird höchstens das Ziel | keiner, wenn die Weiterleitung gewollt ist |
| URL als „noindex“ markiert | die Seite verbietet die Aufnahme selbst | nur, wenn die Seite in die Suche soll |
| URL wird von der robots.txt-Datei blockiert | Google darf die Seite nicht abrufen | prüfen, ob die Sperre beabsichtigt ist |
| Nicht gefunden (404) oder Soft 404 | unter der URL ist kein Inhalt abrufbar oder die Seite wirkt leer | bei umgezogenen Inhalten weiterleiten, sonst keiner |
| Gefunden – zurzeit nicht indexiert | URL bekannt, aber noch nicht gecrawlt; Google hat den Abruf verschoben, meist um die Website nicht zu überlasten | bei wichtigen Seiten interne Verlinkung prüfen |
| Gecrawlt – zurzeit nicht indexiert | abgerufen, aber nicht aufgenommen; laut Google für viele Websites üblich | bei wichtigen Seiten Inhalt und Mehrwert prüfen |
Ein Detail der Hilfe wird oft übersehen: Eine per robots.txt gesperrte Seite kann trotzdem indexiert werden, wenn Google auf anderem Weg genug über sie erfährt, etwa über Links. Die Wahrscheinlichkeit ist laut Google sehr gering. Wer eine Seite sicher aus dem Index halten will, gibt sie zum Crawlen frei und setzt noindex, denn eine gesperrte Seite kann Google nicht abrufen und sieht den noindex-Hinweis nie.
Die beiden „zurzeit nicht indexiert“-Meldungen sind die eigentlichen Entscheidungen von Google. Bei „Gecrawlt“ hat Google die Seite gesehen und vorerst verzichtet. Bei „Gefunden“ ist es noch gar nicht zum Abruf gekommen. Als häufige Gründe gegen eine Indexierung nennt Google geringe inhaltliche Qualität, Robots-Regeln und ein Website-Design, das die Indexierung erschwert.
Indexierung prüfen und steuern
Für einzelne Seiten genügt oft ein kurzer Test. Eine Suche mit dem Operator site: und der vollständigen URL zeigt, ob die Seite in den Ergebnissen auftaucht. Belastbarer ist das URL-Prüftool der Search Console: Es nennt den Indexstatus, die von Google gewählte kanonische URL und den Grund einer Nichtaufnahme. Für Websites mit weniger als 500 Seiten hält Google den ausführlichen Indexierungsbericht nach eigener Aussage meist für entbehrlich.
Steuern lässt sich die Indexierung nur mittelbar. Diese Hebel liegen beim Betreiber:
- Auffindbar machen: Wichtige Seiten brauchen interne Links aus Navigation, Kategorien oder Texten. Eine Seite, die nur in der Sitemap steht, findet Google schlechter. Wie Sie Linkwege im eigenen Projekt ordnen, zeigt der Beitrag Interne Verlinkung.
- Liste einreichen: Eine XML-Sitemap meldet Google die URLs, die Sie für wichtig halten. Sie ist ein Hinweis, kein Befehl.
- Ausschließen, was nicht in die Suche soll:
noindexfür Seiten wie interne Suchergebnisse oder Danke-Seiten, ein Canonical-Tag für Varianten mit gleichem Inhalt. - Crawling anfordern: Nach einer wichtigen Änderung können Sie im URL-Prüftool die Indexierung beantragen. Dafür gilt ein Kontingent, und mehrfache Anfragen beschleunigen nichts.
- Zeit einplanen: Für neue Seiten nennt Google etwa eine Woche bis zur Aufnahme, für ein erneutes Crawling einige Tage bis mehrere Wochen.
Eine vollständige Abdeckung ist kein sinnvolles Ziel. Google schreibt im Bericht ausdrücklich, dass nur die kanonischen Fassungen wichtiger Seiten in den Index gehören. Ein Bestand mit vielen „Duplikat“-Meldungen ist häufig ein Zeichen dafür, dass die Bündelung funktioniert.
Was Indexierung mit Backlinks und KI-Antworten zu tun hat
Für den Linkaufbau gilt die Indexierung in beide Richtungen. Auf Ihrer Seite: Ein Backlink auf eine URL, die Google nicht indexiert, verweist auf eine Seite, die in keiner Suche erscheinen kann. Prüfen Sie deshalb vor jeder Kampagne, ob die Zielseiten im Index sind. Auf der Seite des Publishers: Steht Ihr Link auf einer Seite, die Google nie abruft, kann Google ihn nicht kennen. Was daraus für gekaufte und gesetzte Links folgt, behandelt der Eintrag Link-Indexierung.
Umgekehrt helfen Links bei der Indexierung, weil Google neue URLs vor allem über Links entdeckt. Gerade junge Domains ohne externe Verweise werden selten besucht. Wie die ersten Links einer neuen Website sinnvoll entstehen, steht im Beitrag Backlinks für eine neue Website.
Auch für die KI-Suche bei Google ist der Index die Voraussetzung. Damit eine Seite als unterstützender Link in den KI-Übersichten oder im KI-Modus erscheinen kann, muss sie laut Google indexiert und für ein Snippet geeignet sein (Google: KI-Funktionen und Ihre Website). Zusätzliche technische Anforderungen gibt es dort nicht. Andere Suchmaschinen und KI-Dienste führen eigene Indizes; ein Platz im Google-Index sagt über diese nichts aus.
Beispiel: ein Ratgeberbereich nach dem Relaunch
Ein Hersteller für Gartentechnik stellt seine Website auf ein neues System um und veröffentlicht dabei 120 Ratgeberartikel unter neuen Adressen. Drei Wochen später zählt der Indexierungsbericht 45 dieser URLs als indexiert. 60 stehen unter „Gefunden – zurzeit nicht indexiert“, 15 unter „Gecrawlt – zurzeit nicht indexiert“.
Die Analyse ergibt zwei Ursachen. Die 60 gefundenen Artikel sind nur über eine Sitemap und eine Archivliste mit Blätterfunktion erreichbar, aus Produktseiten oder der Navigation führt kein Link dorthin. Die 15 gecrawlten Artikel sind fast wortgleiche Kurztexte zu Varianten desselben Geräts.
Das Team verlinkt die Ratgeber aus den passenden Produkt- und Kategorieseiten und fasst die 15 Kurztexte zu drei ausführlichen Artikeln zusammen, die alten Adressen leiten per 301 auf die neuen. Sechs Wochen später sind 101 der verbliebenen 108 Ratgeber-URLs indexiert. Eine Crawling-Anfrage hat das Team nur für die drei zusammengeführten Artikel gestellt. Das Beispiel ist konstruiert.
Häufige Fragen
Wie lange dauert die Indexierung einer neuen Seite?
Eine feste Frist gibt es nicht. Google nennt für neue Seiten etwa eine Woche und für ein erneutes Crawling einige Tage bis mehrere Wochen. Seiten, die von häufig besuchten Seiten der eigenen Website verlinkt sind, werden in der Regel schneller gefunden.
Wie kann ich meine Seite bei Google indexieren lassen?
Sorgen Sie dafür, dass die Seite intern verlinkt ist, in der Sitemap steht, mit Statuscode 200 antwortet und kein noindex trägt. Danach können Sie im URL-Prüftool der Search Console die Indexierung beantragen. Eine Garantie auf Aufnahme gibt es auch dann nicht.
Ist „Gecrawlt – zurzeit nicht indexiert“ ein Fehler?
Nicht unbedingt. Google schreibt, dass es nicht alle Seiten indexiert und diese Meldung für viele Websites üblich ist. Handeln sollten Sie, wenn wichtige Seiten betroffen sind: Prüfen Sie dann, ob der Inhalt eigenständig ist und ob die Seite ausreichend intern verlinkt wird.
Was ist der Unterschied zwischen Crawling und Indexierung?
Beim Crawling ruft Google eine Seite ab und lädt ihre Inhalte herunter. Bei der Indexierung analysiert Google diese Inhalte, ordnet sie ähnlichen Seiten zu und speichert die kanonische Fassung im Index. Eine Seite kann gecrawlt und trotzdem nicht indexiert sein.
Verhindert robots.txt die Indexierung?
Nicht sicher. Die robots.txt verbietet den Abruf, nicht die Aufnahme. Erfährt Google auf anderem Weg genug über eine gesperrte URL, kann sie in seltenen Fällen trotzdem im Index landen. Zuverlässig ist noindex, und dafür muss die Seite crawlbar sein.