Knjižnica za otkrivanje Googlebota

Primjer utvrđivanja pripadnosti Googlebota Googleovoj tražilici

Vrlo često napadači indeksiraju web stranice kako bi, na primjer, proslijedili sadržaj, predstavljajući se kao bot Google tražilice. Napadači izvode ovaj jednostavan trik dodajući zaglavlje User-Agent koje sadrži iste podatke kao i zaglavlja pravog bota: Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)

Takve radnje kibernetičkih kriminalaca mogu stvoriti ne samo nepotrebno opterećenje vaših internetskih poslužitelja, već i indeksirati sadržaj vaših web stranica bez vašeg pristanka.

Kako biste spriječili neželjenu aktivnost lažnih robota koji se predstavljaju kao GoogleBot, možete upotrijebiti sljedeći primjer PHP koda (biblioteka za otkrivanje Googlebota):

if (strpos($_SERVER['HTTP_USER_AGENT'],'Googlebot') !== false) {
	$iphost = gethostbyaddr($_SERVER['REMOTE_ADDR']);
	if (substr($iphost, -10) != "google.com" && substr($iphost, -13) != "googlebot.com")
		echo "It's a fake GoogleBot! :(";
	else
		echo "It's a real GoogleBot! :)";
}

Na taj način možete spriječiti neželjene aktivnosti robota koji nisu povezani s Google tražilicom.

Besplatni mrežni alati i usluge za webmastere i vlasnike web stranica