- - - - - - - - - - - - - - - - - - - - - - - - - - - -
Name: Check
Subject: Чем дальше, тем хуже.
Решил я проиндексировать на датапарке ~ 10млн документов.
сейчас база ещё совсем маленькая нету и миллиона.
dpsearch-4.40.1
Fedora
1024mb ram
Ну тут я думаю зависит не от этого, при индексировании вываливаются например
вот такие ошибки:
indexer[21468]: {19} Can't receive from cached [cache.c:3092] -1, Interrupted
system call
indexer[21462]: {18} Can't receive from cached [cache.c:3092] -1, Interrupted
system call
indexer[21455]: {16} Can't receive from cached [cache.c:3158] -1, Interrupted
system call
indexer[21451]: {15} Can't receive from cached [cache.c:3092] -1, Interrupted
system call
indexer[21336]: {10} Can't receive from cached [cache.c:3092] -1, Interrupted
system call
indexer[21325]: {07} Can't receive from cached [cache.c:3158] -1, Interrupted
system call
И индексирование останавливается.
Лечится - перезапуском индексера, но так как не всегда удаётся следить за этой
ошибкой индексации может остановится на некоторое время, а потери у нас во
времени быть не может индексация идёт круглые сутки.
В последнее раз вот ещё что вылетело:
indexer[21468]: {19} Can't receive from cached [cache.c:3092] -1, Interrupted
system call
indexer[21462]: {18} Can't receive from cached [cache.c:3092] -1, Interrupted
system call
indexer[21455]: {16} Can't receive from cached [cache.c:3158] -1, Interrupted
system call
indexer[21451]: {15} Can't receive from cached [cache.c:3092] -1, Interrupted
system call
indexer[21336]: {10} Can't receive from cached [cache.c:3092] -1, Interrupted
system call
indexer[21325]: {07} Can't receive from cached [cache.c:3158] -1, Interrupted
system call
indexer[21322]: {06} Network error
indexer[21086]: {03} Can't receive from cached [cache.c:3158] -1, Interrupted
system call
indexer[21080]: {01} Can't receive from cached [cache.c:3158] -1, Interrupted
system call
indexer[21341]: {11} Reloading config '/www/oker.ru/search/etc/indexer.conf'
free(): invalid pointer 0x40d50870!
- - - - - - - - - - - - - - - - - - - - - - - - - - - -
Read the full topic here:
http://dataparksearch.org/cgi-bin/simpleforum.cgi?fid=04;post=
