El Tue, Oct 30, 2001 at 01:06:42AM +0100, Toni Cuñat deia:
> Simplement crea un arxiu de configuracio el ~HOME/.wgetrc amb la següent
> linea:
> robots = off
>

Tens raó que el problema és el robots.txt.
Però dir-li al robot que es porti malament no és gaire ben educat.
L'autor de la web no vol que facis servir robots per baixar-te 
les seves pàgines (ves a saber perquè) i l'wget és un robot. 

Doncs la solució és mirar-se la web a mà. 

A més la gent quan no fas cas de les seves preferències et poden 
excloure i negar-se a servir les planes al teu user-agent o 
a la teva IP. 




-- 
Xavi Drudis Ferran
[EMAIL PROTECTED]

Respondre per correu electrònic a