Skip to main content
SEO

Google veröffentlicht Liste mit IP-Adressen des Googlebot

By 10. November 2021November 15th, 2021No Comments

Der Useragent ist bei HTTP(S)-Zugriffen vollständig frei wählbar. Daher gibt es nicht nur “echte” Googlebots, die unter dieser Bezeichnung im Internet unterwegs sind, sondern auch Dritte, die sich Vorteile dadurch versprechen, ihre Crawler ebenfalls Googlebot zu nennen.

In der Vergangenheit lief der einzige Weg, die Echtheit von Googlebot-Zugriffen festzustellen, über eine Reverse-DNS- und DNS-Auflösung der zugreifenden IP-Adresse. Hier ein aktuelles Beispiel aus unseren Logfiles:

66.249.66.67 [10/Nov/2021:10:59:29 +0100] „GET /news/ HTTP/1.1“ „Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)“

Um jetzt festzustellen, ob dieser Zugriff durch einen echten Googlebot erfolgt ist, muss man zuerst den sogenannten Reverse-DNS-Eintrag für die zugreifende IP-Adresse ermitteln:

% host 66.249.66.67
67.66.249.66.in-addr.arpa domain name pointer crawl-66-249-66-67.googlebot.com.

Diesen nimmt man dann und löst ihn erneut auf, um die IP-Adresse zu erhalten:

% host crawl-66-249-66-67.googlebot.com
crawl-66-249-66-67.googlebot.com has address 66.249.66.67

Landet man hier auf der IP-Adresse vom Anfang (wie in diesem Beispiel), ist der Zugriff authentisch: hier war es wirklich Google und nicht jemand, der sich nur als Google ausgibt. Doch auch solche Fälle gibt es, wie dieser Logeintrag zeigt:

46.187.1.73 [10/Nov/2021:11:00:42 +0100] „GET /ask-sistrix/ HTTP/1.1“ „Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)“

Der gleiche Useragent wie zuvor, doch ein anderes Bild bei der Auflösung der IP:

% host 192.165.113.171
Host 171.113.165.192.in-addr.arpa not found: 2(SERVFAIL)

Für diese IP-Adresse gibt

Weiterlesen auf sistrix.de

Sie haben eine Frage, wünschen sich ein Erstgespräch oder haben bereits ein konkretes Projekt im Kopf?

Lassen Sie uns drüber reden! Gerne erläutern wir Ihnen in einem persönlichen Gespräch, was wir genau für Sie tun und in welchen Bereichen wir Sie unterstützen können. Rufen Sie uns einfach an oder schreiben Sie uns. Wir freuen uns auf Sie!

Nehmen Sie jetzt Kontakt mit uns, der PW DESIGN Werbeagentur aus Göttingen auf und sichern Sie sich die richtigen Ideen!

Quelle: https://www.sistrix.de/news/google-veroeffentlicht-liste-mit-ip-adressen-des-googlebot/

Close Menu

Kontakt

E:  info@pwdesign.de
T: +49 551 30971380

→ Termin Buchen

Wir bitten Sie um Verständnis, dass wir Termine nur nach vorheriger Vereinbarung wahrnehmen können.

Adresse

Werner-von-Siemens-Str. 1
37077 Göttingen

→ Adresse in Google Maps anzeigen

Werbeagentur aus Göttingen

PW DESIGN ist ein Göttinger Webdesign Unternehmen spezialisiert in Responsive Webdesign mit WordPress, Suchmaschinenoptimierung (SEO), Online Marketing & Corporate- und Grafikdesign.