Suchmaschinen???

oder redest Du von Google Analytics?

Mwn musst Du bei Google einige Einstellungen tätigen und kann mich noch daran erinnern, dass Google auch eine robots.txt verlangt. Dir ist aber auch bekannt, dass Du die Verwendung von Google Webmaster auch auf Deinen Seiten bekannt geben musst (zumindest in DE so), da Nutzerdaten registriert werden. Und nicht nur bekannt geben, sondern auch die Möglichkeit einräumen dem zu widersprechen:

..... Der Erhebung und Nutzung Ihrer IP-Adresse durch Google Analytics können Sie jederzeit mit Wirkung für die Zukunft widersprechen. Nähere Informationen hierzu finden Sie unter http://tools.google.com/dlpage/gaoptout?hl=de Wir weisen Sie darauf hin, dass auf dieser Webseite Google Analytics um den Code „gat._anonymizeIp();“ erweitert wurde, um eine anonymisierte Erfassung von IP-Adressen zu gewährleisten.