Bibliothèque de détection de Googlebot

Un exemple de détermination de l`appartenance de GoogleBot au moteur de recherche Google

Très souvent, les attaquants explorent les sites Web pour, par exemple, transmettre du contenu, se faisant passer pour un bot du moteur de recherche Google. Les attaquants effectuent cette astuce simple en passant un en-tête User-Agent contenant les mêmes informations que dans les en-têtes d`un vrai bot : Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)

De telles actions de cybercriminels peuvent non seulement créer une charge inutile sur vos serveurs Internet, mais également explorer le contenu de vos sites sans votre consentement.

Afin d`empêcher toute activité indésirable de faux robots se faisant passer pour GoogleBot, vous pouvez utiliser l`exemple de code PHP suivant (bibliothèque de détection Googlebot) :

if (strpos($_SERVER['HTTP_USER_AGENT'],'Googlebot') !== false) {
	$iphost = gethostbyaddr($_SERVER['REMOTE_ADDR']);
	if (substr($iphost, -10) != "google.com" && substr($iphost, -13) != "googlebot.com")
		echo "It's a fake GoogleBot! :(";
	else
		echo "It's a real GoogleBot! :)";
}

De cette façon, vous pouvez empêcher les activités indésirables des robots qui ne sont pas liés au moteur de recherche Google.

Outils et services en ligne gratuits pour les webmasters et les propriétaires de sites Web