Stellen Sie sich eine Küche vor, in der ein Koch sein bestes Gericht zubereitet. Frische Zutaten, perfekte Würze, ein Teller, der jeden Gast am Tisch verzaubern würde.

Nur steht dieses Gericht auf keiner Speisekarte.

Kein Gast wird es je bestellen. Nicht, weil es schlecht wäre. Sondern weil niemand weiß, dass es überhaupt existiert.

Genau das ist Indexierung. Oder genauer: das, was passiert, wenn sie fehlt.

Indexierung entscheidet, ob eine gecrawlte Webseite in den Suchmaschinenindex aufgenommen und später gerankt werden kann.

Was Indexierung bedeutet

Indexierung ist der Vorgang, bei dem eine Suchmaschine wie Google eine Webseite analysiert, versteht und in ihren riesigen Datenbestand aufnimmt. Diesen Bestand nennt man den Index. Er ist das Gesamtregister aller Seiten, die Google kennt und für zeigbar hält. Erst was hier liegt, kann überhaupt in den Suchergebnissen auftauchen. So beschreibt es auch Google selbst in seiner Erklärung zur Funktionsweise der Suche.

Der Index ist die Speisekarte des Internets. Milliarden von Seiten, gelesen, einsortiert, abrufbereit. Wenn jemand etwas sucht, durchforstet Google nicht in dieser Sekunde das ganze Netz. Google blättert durch seine Karte. Was dort nicht steht, bleibt in der Küche.

Und hier liegt der Denkfehler, dem viele aufsitzen: Sie glauben, eine Seite existiere, sobald sie online ist.

Für den Server stimmt das.

Für die Suche stimmt es nicht.

Eine Seite kann technisch einwandfrei erreichbar sein, der Browser zeigt sie, der Link funktioniert. Und trotzdem ist sie für Google nicht vorhanden, solange sie nicht im Index gelandet ist. Online heißt nicht auffindbar. Das sind zwei verschiedene Dinge, und der Abstand zwischen ihnen entscheidet darüber, ob Ihre Arbeit jemals gesehen wird.

Crawling, Indexierung, Ranking: drei Schritte, nicht einer

Diese drei Begriffe werden ständig durcheinandergeworfen. Dabei beschreiben sie drei aufeinanderfolgende Vorgänge, die jeweils schiefgehen können. Bleiben wir in der Küche.

Crawling ist der Moment, in dem der Bote der Suchmaschine in Ihre Küche kommt und nachsieht, was es gibt. Bei Google heißt dieser Bote Googlebot. Er folgt Links von Seite zu Seite, liest den Text, die Bilder, die Struktur. Seit 2023 schaut er dabei zuerst auf die mobile Version Ihrer Seite, nicht auf die für den Desktop. Crawling ist das Entdecken und Lesen. Mehr nicht.

Indexierung ist die Entscheidung, das Gericht auf die Karte zu schreiben. Google verarbeitet, was der Bote mitgebracht hat, prüft, ob es sich um ein Original oder nur um eine Kopie eines anderen Gerichts handelt, und legt es ab. Erst jetzt ist die Seite zeigbar.

Ranking ist die Frage, an welcher Stelle der Karte Ihr Gericht steht. Ganz oben, auf Augenhöhe mit dem Gast. Oder auf der letzten Seite, dort, wo niemand mehr hinblättert.

Drei Boten, drei Türen, drei Wege, an denen etwas hakt.

Und jetzt der Satz, der vielen die Arbeit erleichtern würde, wenn sie ihn früher gehört hätten: Die meisten Probleme, die für Ranking-Probleme gehalten werden, sind in Wahrheit Indexierungsprobleme.

Sie können nicht um den besten Platz auf der Karte streiten, wenn Ihr Gericht gar nicht draufsteht.

Wo also fangen Sie an, wenn eine wichtige Seite keine Besucher aus der Suche bekommt? Nicht bei den Keywords. Bei der schlichten Frage: Ist diese Seite überhaupt im Index?

Wie Google entscheidet, was auf die Karte kommt

Hier wird es unbequem. Nicht alles, was der Bote gesehen hat, landet auf der Karte. Crawling ist kein Versprechen auf Indexierung.

Google bewertet, ob eine Seite es wert ist, gespeichert zu werden. Ist der Inhalt dünn, austauschbar, eine Variante von zehn anderen Seiten? Dann bleibt sie draußen. In der Google Search Console, dem kostenlosen Werkzeug, mit dem Sie Ihre Seite bei Google überwachen, tauchen dafür zwei Meldungen auf, die Sie kennen sollten:

Gecrawlt, zurzeit nicht indexiert heißt: Der Bote hat das Gericht probiert und sich gegen die Karte entschieden. Meist, weil der Inhalt zu mager war, um sich von anderem abzuheben. Beliebig zusammengeschriebener Text, der keinem Menschen etwas gibt, gehört in diese Schublade.

Gefunden, zurzeit nicht indexiert heißt: Der Bote hat von dem Gericht gehört, ist aber gar nicht erst gekommen, um es zu probieren. Die Seite wirkte zu unwichtig, oft weil keine andere Seite auf sie verweist.

Ein dritter Fall ist tückischer, weil er nicht nach einem Fehler aussieht. Bieten mehrere Ihrer Seiten fast dasselbe an, kaum ein Unterschied im Text, dann erkennt Google darin Dubletten und wählt eine davon als das Original. Die übrigen bleiben von der Karte. Drei Köche, die nahezu dasselbe Gericht zubereiten, ergeben nicht drei Einträge, sondern einen. Diese eine Version heißt die kanonische. Welche es wird, entscheidet Google, und nicht immer so, wie Sie es gern hätten. Wer denselben Inhalt unter mehreren Adressen ausliefert, verteilt seine Kraft auf Türen, von denen die meisten verschlossen bleiben.

Die Lehre daraus ist nüchtern: Eine Seite, die niemand braucht, indexiert auch Google ungern. Die Karte soll Gäste glücklich machen, nicht Platz verschwenden.

Wie Sie die Indexierung steuern

Sie sind dem Vorgang nicht ausgeliefert. Sie haben zwei Hebel, und genau diese beiden werden am häufigsten verwechselt.

Der erste ist das noindex-Tag, eine kleine Anweisung im Kopfbereich Ihrer Seite. Sie sagt: Dieses Gericht ist nicht für Gäste gedacht. Ein Personalessen. Login-Seiten, Dankesseiten nach einem Kauf, rechtliche Hinweise, die niemand sucht: alles Fälle, in denen ein noindex sinnvoll ist.

Der zweite ist die robots.txt, eine Datei im Hauptverzeichnis Ihrer Domain. Sie sperrt dem Boten die Küchentür und verhindert das Crawling.

Und jetzt kommt der Unterschied, der die meisten kostet: Die robots.txt verhindert das Crawling, nicht zuverlässig die Indexierung. Verweisen andere Seiten auf Ihre gesperrte URL, kann Google sie trotzdem auf die Karte setzen. Als bloßen Namen, ohne dass je ein Bote das Gericht gesehen hätte.

Daraus folgt die Falle, in die selbst erfahrene Leute tappen: Wer eine Seite aus dem Index entfernen will und sie deshalb per robots.txt sperrt, erreicht das Gegenteil. Denn der Bote kommt nun nicht mehr herein und sieht das noindex im Kopf der Seite gar nicht. Die Tür ist zu, der Zettel hängt drinnen.

Wollen Sie eine Seite draußen halten, lassen Sie die Tür offen und legen den Zettel auf das Gericht. Also: noindex setzen, das Crawling erlauben. Nicht umgekehrt.

Und wenn Sie eine Seite im Index haben wollen? Dann reichen Sie Google eine XML-Sitemap ein, eine schlichte Liste aller Gerichte, die Sie anbieten. Sie verlinken Ihre Seiten sauber untereinander. Sie sorgen für kurze Ladezeiten. Und Sie schreiben etwas, das ein Mensch wirklich lesen will. Bei neuen Seiten brauchen Sie etwas Geduld: Von der ersten Veröffentlichung bis zum Eintrag im Index vergehen oft einige Tage, manchmal Wochen.

Hinzu kommt ein Detail, das gerade größere Seiten unterschätzen: Der Bote bleibt nicht endlos. Pro Durchgang besucht Google nur eine begrenzte Zahl an URLs. Seiten, die tief vergraben liegen und auf die kaum etwas verweist, warten dann länger, manchmal sehr lange. Wer dem Boten den Weg leicht macht, mit klarer Struktur und kurzen Pfaden zu den wichtigen Seiten, bekommt mehr von dem indexiert, worauf es ankommt. Die Küche mag groß sein. Die Zeit des Boten ist es nicht.

Wie Sie prüfen, ob eine Seite im Index ist

Zwei Wege, einer schnell, einer genau.

Der schnelle: Geben Sie site:ihredomain.de in die Google-Suche ein. Sie sehen dann ungefähr, welche Ihrer Seiten auf der Karte stehen. Ungefähr ist das richtige Wort. Diese Zahl ist eine Schätzung, kein Kassensturz.

Der genaue: die Dokumentation zu Crawling und Indexierung von Google und der dazugehörige Bericht in der Search Console. Dort prüfen Sie jede einzelne URL, sehen ihren Status und können mit einem Klick die Indexierung beantragen, wenn eine wichtige Seite zu lange wartet.

Der Punkt, der bleibt

Indexierung klingt nach Technik. Im Kern ist sie eine Frage des Gesehenwerdens.

Sie können die beste Seite Ihrer Branche geschrieben haben. Klar, ehrlich, hilfreich. Wenn sie auf keiner Karte steht, sucht sie kein Mensch, findet sie kein Mensch, liest sie kein Mensch. Der Index ist die Schwelle. Davor existiert Ihre Arbeit nur für Sie selbst.

Das ist die ernüchternde Seite. Die ermutigende: Indexierung gehört zu den wenigen Dingen im Suchgeschäft, die Sie weitgehend selbst in der Hand haben. Kein Algorithmus-Rätsel, kein Wettbieten gegen andere. Eine Frage von sauberer Technik und ehrlichem Inhalt. Beides liegt bei Ihnen.

Bevor Sie also über Plätze und Rankings nachdenken, stellen Sie sich die unbequemere Frage zuerst:

Steht Ihr Gericht überhaupt auf der Karte?