Noindex: Die Seiten, die Google nicht sehen soll

Noindex ist das höfliche „Bitte nicht abdrucken“ an Suchmaschinen. Während die meiste SEO-Arbeit darum kreist, in Google zu kommen, geht es hier ums genaue Gegenteil – und das ist überraschend oft die klügere Entscheidung.

Mit dieser Anweisung sagen Sie Suchmaschinen klar: Nimm diese Seite nicht in deinen Index auf, zeige sie also nicht in den Suchergebnissen. Die Seite bleibt im Web also ganz normal erreichbar und nutzbar, taucht aber in den organischen Suchergebnissen bei Google schlicht nicht mehr auf.

Gesetzt wird das meist als Robots-Meta-Tag im Kopfbereich der Seite oder über den HTTP-Header X-Robots-Tag – Letzteres ist praktisch für Dateien, die kein HTML sind, etwa PDFs. Es ist also kein Schloss, sondern ein Schild: „bitte nicht ins Schaufenster“.

Hier verwechseln viele zwei Dinge. Die robots.txt steuert das Crawling – also ob ein Suchmaschinen-Bot eine Seite überhaupt besuchen darf. Das Meta-Tag steuert die Indexierung – ob die Seite in die Suche aufgenommen wird.

Der feine, aber entscheidende Haken: Wer eine Seite in der robots.txt sperrt, verhindert oft, dass Google die Anweisung überhaupt liest. Für „nicht in Google zeigen“ ist deshalb das Meta-Tag der richtige Hebel – nicht die robots.txt.

Typische Kandidaten sind Seiten, die für Nutzer nützlich, für die Suche aber irrelevant sind:

• „Danke für Ihre Anfrage“- und Bestätigungsseiten.
• Interne Suchergebnis-Seiten (sie blähen den Index auf).
• Druckansichten und reine Funktionsseiten.
• Staging-, Test- und Entwicklungsumgebungen.
• Dünne Dubletten ohne eigenständigen Wert.

Und jetzt der Fehler, der wirklich wehtut. Wird ein seitenweiter Index-Ausschluss versehentlich auf die komplette Website ausgerollt – etwa weil eine Einstellung aus der Testumgebung live geht –, verschwindet die gesamte Seite aus Google.

Das ist einer der häufigsten ernsten SEO-Unfälle überhaupt: ein Tag, ein Häkchen, und das Licht geht aus. Genau deshalb gehört „Indexierung prüfen“ auf jede Launch-Checkliste. Tückisch ist der Fehler vor allem, weil er lautlos passiert: Die Seite funktioniert weiter, sieht völlig normal aus, lädt schnell – nur findet sie in Google niemand mehr. Während technische Pannen meist sofort auffallen, bleibt ein falsch gesetztes Tag oft tagelang unbemerkt, bis der Traffic einbricht und jemand genauer hinschaut.

Weil sie ähnlich klingen, werden die beiden gern in einen Topf geworfen. Sie tun aber völlig Unterschiedliches: Das eine steuert, ob eine Seite in den Index kommt. Das andere – nofollow – steuert, ob ein Link Vertrauen weitergibt.

Man kann sie sogar kombinieren – etwa eine Seite vom Index ausschließen und den Bots zusätzlich sagen, den Links auf ihr nicht zu folgen. Aber es bleiben zwei verschiedene Werkzeuge für zwei verschiedene Aufgaben.

1. Vor jedem Launch prüfen: Steht versehentlich ein seitenweiter Index-Ausschluss?
2. Nutzlose, aber notwendige Seiten (Danke-Seiten, interne Suche) gezielt ausschließen.
3. Für „nicht zeigen“ das Meta-Tag nutzen – nicht die robots.txt.
4. Nach dem Go-Live in der Search Console die Indexierung kontrollieren.

Die Anweisung ist nur ein Werkzeug unter mehreren, mit denen man steuert, was in der Suche landet. Daneben steht das Canonical-Tag, das bei mehreren ähnlichen Seiten die maßgebliche Version benennt – nützlich gegen Dubletten, etwa bei Filter- und Sortier-URLs in Shops. Beide verfolgen ein gemeinsames Ziel: den Index sauber und fokussiert zu halten.

Ein häufiges Missverständnis betrifft das Crawl-Budget. Eine ausgeschlossene Seite wird trotzdem weiter besucht, denn die Bots müssen die Anweisung ja jedes Mal lesen. Wer also denkt, er spare damit Crawl-Aufwand, irrt. Und noch eine Klarstellung: Das Ganze ist kein Datenschutz. Wirklich vertrauliche Inhalte gehören hinter ein Passwort oder eine Zugriffskontrolle – ein bloßes Fernhalten aus den Ergebnissen schützt sie nicht davor, über die direkte Adresse erreichbar zu sein. Wer diese Werkzeuge sauber auseinanderhält – Crawling, Indexierung, Kanonisierung und echter Zugriffsschutz –, behält die Kontrolle darüber, was Google sieht, was es ignoriert und was gar nicht erst nach außen dringt.