- - - - - - - - - - - - - - - - - - - - - - - - - - - -
Name: Maxime
Subject: Re: Вопрос по Disallow
Сообщение типа
indexer[7508]: {02} [] Subdoc URL: ...
говорит о том, что обнаружен поддокумент и начата процедура его индексирования,
но все фильтры Disallow, ровно как и правила robots.txt применяются к таким
документам. Если вы попробуете проиндексировать какой-нибудь URL с
поддокументами указав ключ -v5 (максимум выдачи отладочной информации) для
indexer, вы увидите сообщения, какой документ/поддокумент принят к
индексированию, а какой не принят.
- - - - - - - - - - - - - - - - - - - - - - - - - - - -
Read the full topic here:
http://mmm.dataparksearch.org/cgi-bin/simpleforum.cgi?fid=05;topic_id=1206887183
