Глубина обхода сайтов

 

Для того, чтобы не тратить слишком много ресурсов на краулинг каждого сайта, можно ограничить глубину его обхода.

 

Режим "Только главная" - означает, что будет загружена только одна страница сайта - именно тот URL-адрес, который был в исходном списке/найден в результатах поиска/ссылке профиля пользователя и т.п. LetsExtract не будет загружать никакие страницы сайта дополнительно к исходному URL.

 

 

Режим "Указать глубину" позволяет нам указать, сколько уровней страниц (относительно исходного URL) ИЛИ максимум URL мы хотим загрузить.

 

 

Нулевым уровнем считается исходный URL. Все URL-адреса, найденные на этой исходной странице считаются URL-адресами первого уровня, и т.д.