SEO-News

SuchmaschinenbotObwohl Google inzwischen zum Rendern von Webseiten eine aktuelle Version des Googlebots verwendet, erfolgt der initiale Abruf des HTML-Codes noch immer mit dem alten User Agent.

Im letzten Monat war der Googlebot auf Chrome 79 aktualisiert worden, was einige Webmaster in den Logfiles bemerkt hatten. Allerdings gab es nach wie vor auch noch Aufrufe des Googlebots unter Chrome 41. Johannes Müller hatte erklärt, der alte User Agent würde weiterhin zum Abrufen von Ressourcen genutzt.

Martn Splitt von Google hat dies jetzt ein wenig präzisiert und auch in eine zeitliche Reihenfolge gebracht. Im ersten Schritt führt demnach der Googlebot einen HTTP-Request aus, um das HTML einer Seite abzurufen. Dieser Vorgang findet noch mit dem alten User Agent statt.

Der Web Rendering Service (WRS) kümmert sich danach um das Rendering der Seite und lädt das HTML und die damit verbundenen Ressourcen. Das alles wird mit dem neuen User Agent durchgeführt:

 

Googlebot: Anfrage des HTML-Codes einer Webseite findet mit altem User Agent statt

 

Wie Schmitt weiter schreibt, kann im Prinzip jeder Teil der Prozesskette, welcher den WRS aufruft, den alten User Agent verwenden. Man solle also keine vorzeitigen Schlüsse aus der Angabe des User Agents ziehen:

 

Googlebot: keine voreiligen Schlüsse aus Angabe des User Agnents ziehen

 

 

Also nicht wundern, wenn in den Logfiles nach wie vor unterschiedliche User Agents für den Googlebot auftauchen. Vermutlich wird dies noch eine Weile so bleiben.

 

Titelbild: Copyright Patrick Daxenbichler - Fotolia.com

 

Verwandte Beiträge

Damit Google eine Website crawlen kann, muss der Webserver die richtige HTTP-Antwort an den Googlebot senden. Ansonsten kann es zu Problemen kommen.

Google hat angekündigt, das Crawl Limiter Tool, mit dem sich die Crawl-Rate des Googlebots manuell reduzieren lässt, zum 8. Januar einzustellen.

Wenn Google auf Webseiten mit schlechten Inhalten stößt, werden Webseiten und dort enthaltenes JavaScript gar nicht erst gerendert. Das kann dann problematisch sein, wenn per JavaScript relevante...

SEO-Newsletter bestellen

Im monatlichen SEO-Newsletter erhaltet Ihr eine Übersicht der jeweils zehn wichtigsten SEO-Meldungen des Monats. Mit dem SEO-Newsletter bleibt Ihr auf dem Laufenden.
Ich bin mit den Nutzungsbedingungen einverstanden

Anzeige

rnkeffect

Premium-Partner (Anzeige)


Anzeigen InternetX

SEO Agentur aus Darmstadt

Better sell online

Online Solutions Group

Onsite-Optimierung

Onsite-Optimierung

 

Sprecher auf

SEO- und Suchmaschinenblogs

SEO-FAQ

Bild © FM2 - Fotolia.com

SEO selber machen

SEO selber machen

Bekannt aus

Website Boosting


Internet World Business

SEO United


The SEM Post


Webselling

Jetzt vernetzen

SEO-Glossar

SEO-Glossar

 

SEO im Ohr, der Podcast von SEO Südwest: aktuell Folge

SEO-Beratung

Wir bringen gemeinsam Ihre Webseite in Google nach vorne. Profitieren Sie von jahrelanger SEO-Erfahrung.

Social Networks und RSS-Feed

Auszeichnungen

seo19 sieger sichtbarkeit 2020 200x200px