- - - - - - - - - - - - - - - - - - - - - - - - - - - - Name: nedotopa Subject: Re: Как научить понимать робота ?
> At 16:18:14 13/12/08, Maxime wrote: >Если сайты одинаковые, то в indexer.conf нужно указать команду >DetectClones yes > >Если сайты разные, то нужно указать команду >MaxSiteLevel 2 >в файлах конфигурации indexer.conf и search.htm > >и указать команду >GroupBySites yes >в search.htm Спасибо за ответ. Но... Проблема такая - при индексировании использую к примеру Realm http://*.biz/* и появляются дубли вида http://www.site.biz/1.htm and http://site.biz/2.htm разница только в страничках и урле! Как поступить? обрезать по умолчанию www? Но если урл без www недоступен!? - - - - - - - - - - - - - - - - - - - - - - - - - - - - Read the full topic here: http://www.dataparksearch.org/cgi-bin/simpleforum.cgi?fid=05;topic_id=1229084388;reply=1229174294
