Автоматическое индексирование дерева

[(:)]

добрый день

научился пользоваться краулером.
но пока что только вручную приходится запускать индесирование из интерфеса последнего. причем раздражает, что за один раз краулер проходит только 50 записей.

как же правильно настроить автоматический регулярный проход краулера по всему дереву сайта?

у кого-то есть уже опыт?

спасибо