Hallo Michelle, 

Michelle Konzack schrieb:
> 
> Dieser Webspiderer ignoriert die robots-Datei. 
> 
Wenn er auch
        <meta name="robots" content="index|noindex|follow|nofollow">
ignoriert,
sperr ihn mit iptabels aus.

Uli


-- 
Haeufig gestellte Fragen und Antworten (FAQ): 
http://www.de.debian.org/debian-user-german-FAQ/

Zum AUSTRAGEN schicken Sie eine Mail an [EMAIL PROTECTED]
mit dem Subject "unsubscribe". Probleme? Mail an [EMAIL PROTECTED] (engl)

Antwort per Email an