Поэтому приведем некоторые рекомендации по настройкам и общим принципам загрузки сайтов из сети Интернет.
1. В зависимости от типа закачиваемого на компьютер сайта, исключайте из загрузок файлы с ненужными расширениями. Пример: при загрузке фалов рефератов можно исключить GIF, PNG, и видео-форматы, но при этом явно указать программе загружать ZIP, RAR, TAR, GZ, TGZ и другие архивы, в которых хранятся рефераты.
2. В закладке "Ограничения" максимальную глубину вложений можно выбрать методом экспериментов, достаточно выбрать параметр 10 и следить за типом загружаемых файлов.
3. Внимательно отнеситесь к параметрам Пауза после загрузки, Скорость закачки и Максимальное число соединений — они отвечают за то, как быстро сервер определит что на нем находится не человек а работ и заблокирует ваш IP.
Здесь хорош принцип — тише едешь, дальше будешь, который означает что лучше выставить меньшую скорость и больший тайм-аут между закачками, чем ждать пока сайт разблокирует ваш IP.
4. В разделе "Структура" выбирается вид, в котором сайт будет сохранен на компьютер. Вы сможете просмотреть его в любом случае, просто выберите вид в котором вам будет удобнее ориентироваться.
5. В разделе "Лог, индекс, кэш" установите отметку "Log файлы" и параметр "Обычная" — этого будет достаточно для коррекции настроек загрузки, в зависимости от ошибок, которые будут описаны в лог файле.
6. "Идентификация" — здесь настраивается вид браузера, которым представляется программа для закачиваемого сайта, этот параметр работал раньше, теперь сайты стали умнее и так просто их не обмануть, поэтому смело пропускайте эти настройки.
Пример: при загрузке фалов рефератов можно исключить GIF, PNG, и видео-форматы, но при этом явно указать программе загружать ZIP, RAR, TAR, GZ, TGZ и другие архивы, в которых хранятся рефераты.