um in einer Htaccess Suchbots dauerhaft auszzusperren ist folgender Eintrag hilfreich:



#Liste der Bots definieren
SetEnvIfNoCase user-Agent “^ShopWiki” stopbot
SetEnvIfNoCase user-Agent...