Google ignoriert Meta Robots Tags mit den Angaben 'index', 'all' und 'follow'. Dennoch haben auch diese Angaben ihre Daseinsberechtigung.
Wenn es auf einer Webseite ein Meta Robots Tag mit der Ausprägung "index", "all" oder "follow" gibt, dann hat das keine Auswirkungen auf die Behandlung der Seite durch Google. Der Grund dafür ist, dass Google diese einfach ignoriert. Warum das so ist, erklärte John Müller jetzt per Twitter.
Es handelt sich dabei jeweils um das Standardverhalten: Eine Seite kann demnach indexiert und deren Links gefolgt werden. Müller schrieb aber auch, die Verwendung dieser Werte könne dennoch sinnvoll sein, zum Beispiel zu Dokumentationszwecken. Sie würden von Suchmaschinen ignoriert, aber sie würden auch keine Probleme verursachen:
"The robots meta tags 'all', 'index', and "'ollow' don't do anything -- they're the default behavior. Sometimes it's useful for your documentation to specify them, but search engines ignore them (they don't cause problems either)."
Das Meta Robots Tag "all" sagt übrigens lediglich aus, dass es keinerlei Einschränkungen für Suchmaschinen bei der Behandlung der betreffenden Seite gibt. Sie darf also indexiert werden, und Suchmaschinen dürfen den Links auf der Seite folgen - sofern sie nicht einzeln per "nofollow" gekennzeichet sind.
Titelbild: Copyright Paul Pirosca - Fotolia.com