Здравствуйте
вот эти процессы
процесссы завершены
ok
проверьет robots.txt
настройки для роботво особенно настройку задержки
так же просмотриет логи посещений