Сразу хотел бы предупредить, что это не
сравнительный обзор менеджеров загрузки. Статья написана для тех, кто
остановил свой выбор на программе Offline Explorer Pro или хочет узнать,
почему это сделал я. Программу использую давно, загрузил ей около сотни
сайтов, и просто хотел бы поделиться некоторым опытом ее использования.
Статья написана 05.09.03.
Замечание от 22.06.08: Почти перестал скачивать сайты. Экспорт из программы стал работать отвратительно.
Во время экпорта пропадают целые куски сайтов (порой доходит до 80% потерь), хотя сайт локально загружен.
Не зафиксировал ни один случай 100% работоспособности экспорта с пометкой "Использовать стандартные расширения для известных типов файлов": либо ссылка есть - файла нет, либо наоброт,
причем все файлы локально загружены, проблемы начинаются при экспорте.
Претензий к просмотру скаченных сайтов из самой программы Offline Explorer нет.
При первом запуске программы отключите Советы - Wizard
& Tips of the Day (уберите флажок у Show tips at startup)
и переключите программу на русский язык (меню: View\Languages\Russian).
Далее советую изменить некоторые настройки программы (меню: Вид\Настройки).
1) Уменьшите Автосохранение до 5 минут.
2) Включите опцию Работа в области списка задач,
чтобы программа сворачивалась в "трей" при минимизации.
3) Укажите опцию минимизации. Теперь программа будет
сворачиваться в трей при нажатии на кнопку "Х" закрытия окна.
4) Измените каталог загрузки сайтов на диск, где у Вас больше места.
Обратите внимание: при выборе этой опции
программа не будет создавать более 1000 файлов в каждом директории при
загрузке сайтов. Создадутся дополнительные каталоги (%&ovrX)
куда поместятся файлы. Эта возможность очень пригодится пользователям
операционных систем Windows 95/98/Ме, в которых количество файлов в
одном директории значительно ограничено по сравнению с другими системами.
Если не выставить эту опцию, то при загрузке больших сайтов каталог
может переполниться и не все страницы загрузятся. Указание опции никак
не сказывается на просмотр загруженных сайтов. При Экспорте
(см.ниже) программа автоматически поменяет все
ссылки с учетом созданных ею каталогов (%&ovrX).
Замечательным свойством программы является возможность создать папку
со своей настройкой каталога и все проекты в папке будут использовать
каталог загрузки папки.
Остальные настройки выбирайте на ваше усмотрение. У меня они меняются
в зависимости от ставящейся задачи (см.ниже).
Шаблоны
Следующим шагом советую настроить шаблоны для загрузки. Шаблон - это
набор установок, использующийся для создания новых проектов. Список
шаблонов можно найти в меню Файл\Шаблоны. Один из них является шаблоном
по умолчанию (основным) и используется для новых проектов, когда не применяется
Мастер или другой шаблон.
Стандартно я использую 3-4 шаблона,
и они почти всегда меня устраивают. Если загружаемый сайт имеет некоторую
особенность, то я создаю проект с помощью Мастера (меню: Файл\Проект\Мастер).
Особенности моего самого частого шаблона:
1) Уровень глубины (вложенности) загрузки установлен равным 99.
2) Включено: Не загружать существующие файлы. Т.о., если прервать
закачку и запустить снова, программа не будет проверять обновление страниц
и сразу начнет загружать отсутствующие.
3) Отключено: Видео, Аудио, Архивы.
4) Для изображений у меня указано Загружать только с начального
сервера, чтобы не грузить счетчики, баннеры и пр.
Замечу, что для каждого типа файлов можно установить помимо других
ограничений, ограничение по размеру. Помню, я загружал некий сайт и
сохранил себе время и траффик, ограничив размер картинок, и не выгрузил
галерею, которая шла немного не в тему к основному материалу сайта.
5) Укажите так же фильтр URL для серверов, чтобы
программа не начала "гулять" по всему интернету:
6) Далее, настоятельно рекомендую для каталогов добавить
исключения форумов, голосований и прочего:
Полный список рекомендуемых каталогов для исключения:
Аналогично для исключения из загрузки файлов (Фильтры URL |
Имя файла) рекомендую указать:
*print* - обычно используется на сайтах как "Версия
для печати"
*mail* - аналогично для "Отправить другу"
*comment* - чаще "Послать комментарий"
и, по необходимости:
*.pdf
*.exe
*.ppt
*.doc
*.xls
Внимательнее с шаблоном *.exe. Есть сайты, на которых
расширение exe имеют скрипты и, соответственно, при исключении
этого расширения некоторые страницы просто не загрузятся.
7) Когда необходимо загрузить только часть сайта можно ограничить загрузку
начальным каталогом:
В общем-то, с шаблонами все. Далее выбираете созданный
шаблон (Файл\Проект\Шаблоны\<Название шаблона>),
вводите URL и загружаете сайт.
Перед загрузкой любой сайт следует слегка исследовать.
Как правило, это сводится к тому, чтобы найти "тяжелые" каталоги
для загрузки и исключить их по маске. Каталоги презентаций, фотоальбомов,
программ, конференций, если, конечно, не они являются целью загрузки.
Дополнительно следует исключить файлы по маске, которые могут повторяться
почти на каждой странице, например: Отправить страницу другу, Отправить
ссылку, Версия для печати, Оставить примечание в гостевой
и т.п.
После загрузки сайта рекомендую
выполнить экспорт проекта (Файл\Экспорт) чтобы программа
поправила ссылки, если были созданы каталоги %&ovrX
(см. выше) или выполнить другие действия с уже загруженным
сайтом.
Тонкая настройка
Замечали, наверное, что не все сайты поддаются загрузке
менеджерами. Подобной "хитрецой" обладает всем известный Firststeps.ru
Однако программа справилась и с ним. Устанавливаем в настройках одно (!)
соединение и паузу между загрузками 3 секунды. И все. Сервер "думает",
что пользователь с паузами грузит странички и конечно их отдает без проблем.
Все очень просто, хотя и качается, конечно, дольше.
Однако и это еще не все. Чтобы ускорить загрузку отключите получение изображений
при установленном одном соединении. Когда странички загрузятся, можете
установить даже 50 соединений для загрузки картинок, в то время как отключена
загрузка страничек. Сайт построен на скриптах и отслеживает интервалы
выдачи страничек, однако за изображениями он следить не умеет.
Чтобы еще более спутать скрипт возвращающий страницы
можно указывать случайную паузу между загрузками. Например, 3-10 - Offline
Explorer будет ждать от 3 до 10 секунд после загрузки предыдущего файла.
Сайт не предоставляет электронные версии произведений, а занимается лишь коллекционированием и каталогизацией ссылок, присылаемых и публикуемых на форуме нашими читателями. Если вы являетесь правообладателем какого-либо представленного материала и не желаете чтобы ссылка на него находилась в нашем каталоге, свяжитесь с нами и мы незамедлительно удалим её.
Файлы предоставлены пользователями сайта, и администрация не несёт ответственности за их содержание. Просьба не заливать файлы, защищенные авторскими правами, а также файлы нелегального содержания!
