Ab dem 1. September wird Google keine 'noindex'-Direktiven mehr in der robots.txt unterstützen. Auch andere Anweisungen sind betroffen. Google rät betroffenen Webmastern, rechtzeitig Änderungen vorzunehmen.
Im Juli hatte Google angekündigt, ab dem 1. September "noindex" und andere Anweisungen in der robots.txt nicht mehr zu unterstützen. Einen offziellen Support für noindex in der robots.txt durch Google hatte es ohnehin noch nie gegeben.
In einem Tweet hat Google jetzt auf den bevorstehenden Termin hingewiesen und empfohlen, sich um Alternativen zu kümmern:
Weiterhin werden auch Regeln wie crawl-delay oder nofollow ab dem 1. September nicht mehr unterstützt, wenn sie sich in der robots.txt befinden.
Google hatte allerdings darauf hingewiesen, dass betroffene Websites keinen Schaden befürchten müssen, wenn sie nach dem 1. September weiterhin Noindex-Direktiven in der robots.txt belassen. Google werde diese dann einfach ignorieren.