Herzlich willkommen im SEO Forum der ABAKUS Internet Marketing GmbH
registrieren registriertes Mitglied
Hanzo2012 hat geschrieben: ↑05.02.2020, 21:25 Ja, das kann und wird ins Auge gehen!
Schau hier, was Google sagt, wie man den Googlebot sicher erkennen kann: https://support.google.com/webmasters/answer/80553
(Du musst den Hostnamen zur IP-Adresse ermitteln und schauen, ob er mit ".googlebot.com" oder ".google.com" endet.)
Guter Vorschlag. Besten DankHanzo2012 hat geschrieben: ↑06.02.2020, 09:05 I
Ein Fake-Googlebot (den man guten Gewissens blockieren kann) liegt dann vor, wenn alle der folgenden Bedingungen erfüllt sind:
1. sein User Agent behauptet, er sei ein Googlebot
2. seine IP beginnt nicht mit 66.249
3. sein Hostname endet nicht auf .google.com oder .googlebot.com
Wenn man Bedingung 2 vor Bedingung 3 testet, kommt es erst dann zu einer langsamen Reverse DNS-Anfrage, wenn Google mal seine IPs ändert (in dem Fall könnte das Script direkt eine E-Mail an den Admin schicken, damit der sich das anschauen kann).