Google rät dazu, einheitliche Signale zu senden, wenn es um die Indexierung von Seiten geht. Widersprüchliche Signale sollten vermieden werden.
Es gibt verschiedene Möglichkeiten, die Indexierbarkeit von Seiten für Suchmaschinen festzulegen. Neben dem Meta Robots-Tag kann dazu auch das X-Robots-Tag im HTTP-Header genutzt werden.
Dabei kann es auch zu widersprüchlichen Angaben kommen, zum Beispiel, wenn im Meta Robots-Tag ein "noindex" und im X-Robots-Tag ein "index" steht. In einem solchen Fall greift die strengere Direktive, das bedeutet, Google würde die Seite als "noindex" bewerten.
Solche Situationen sollten allerdings vermieden werden. John Müller schrieb auf Twitter, man sollte eindeutige Signale senden, vor allem dann, wenn es um Entscheidungen wie "indexieren oder nicht" gehe:
"More restrictive is what the docs say. Also: Don't Do That. Be consistent & avoid having to guess, especially when it comes to critical "to index or not" decisions."
Eindeutige Signale sind auch an anderer Stelle wichtig, zum Beispiel, wenn es um die Auswahl von Canonical-URLs geht. Nur so lässt sich sicherstellen, dass Google Webseiten so behandelt, wie es gewünscht ist.
Titelbild: Copyright Paul Pirosca - Fotolia.com
SEO-Newsletter bestellen
