Bleibt zu hoffen, dass die sich auch an die robots.txt-Restriktionen halten. Vielen SuMas geht die robots.txt ja bekanntlich am Ar*** vorbei. Deshalb bevorzuge ich .htaccess