Массовая загрузка набора URL с логином

986
ripper234

Возможный дубликат:
Как я могу скачать весь сайт

Я ищу массовой загрузки, чтобы помочь мне загрузить всю базу данных с сайта, на котором у меня есть аккаунт. Требования просты:

  1. Авторизуйтесь, используя мой логин и пароль (логин на основе формы)
  2. Загрузите все URL-адреса формы " http://site.com/ID ", где идентификатор меньше 1000.

Что я должен использовать?

1
Вау, так много ответов, так мало голосов по любому из них (пока 0 голосов проголосовавших). ripper234 14 лет назад 0
Как это так же, как загрузка всего сайта? Я не хочу переходить по ссылкам, я хочу скачать набор ссылок определенной формы. ripper234 14 лет назад 0
Сравнивая эти ответы с перечисленным дубликатом, все они перечисляют точно такие же ответы, которые были предоставлены на этот вопрос. Поэтому это дубликат. Большая часть программного обеспечения, указанного на дубликате, позволяет эту функцию. BinaryMisfit 14 лет назад 0

6 ответов на вопрос

1
harrymc

GetGo Download Manager, кажется, делает это:

Вы можете легко настроить пакетную загрузку, которая не только загружает большой список файлов, используя шаблон шаблона URL, но также автоматически переименовывает загруженные файлы, используя шаблон шаблона имени файла.

1
Mehper C. Palavuzlar

Я строго рекомендую NeoDownloader . Я использую это годами.

Он загружает с защищенных паролем сайтов и поддерживает загрузку диапазонов URL.

0
squillman

Попробуйте Orbit Downloader . МНОГИЕ варианты доступны с этим.

0
Alok

Мне повезло с Offline Explorer . Позволяет вам получить доступ к защищенным паролем страницам и имеет множество дополнительных параметров.

0
CarlF

Вы можете сделать это с помощью wget и, возможно, очень простым скриптом (в зависимости от того, как настроен сайт).

0
joe

HTTRACK работает как чемпион по копированию содержимого всего сайта. Этот инструмент может даже захватить части, необходимые, чтобы веб-сайт с активным содержимым кода работал в автономном режиме.

alt text

Похожие вопросы