нужен менеджер закачек HTTP с поддержкой закачек по маске

Модератор: /dev/random

R1a
Сообщения: 6

нужен менеджер закачек HTTP с поддержкой закачек по маске

Сообщение R1a »

Помогите найти менеджер закачек (желательно наличие GUI) с поддержкой закачек по маске с HTTP, для скачивания кучи файлов с однотипными именами, различающимися только цифрами.

Например:
http://www.cfa.harvard.edu/mpec/K09/K09E*.html

где * - номер с 00 по 39
Изображение
Спасибо сказали:
Аватара пользователя
nesk
Сообщения: 2268
Статус: Линукссаксовец
ОС: MS Windows XP Home SP3

Re: нужен менеджер закачек HTTP с поддержкой закачек по маске

Сообщение nesk »

R1a писал(а):
05.03.2009 14:48
Помогите найти менеджер закачек (желательно наличие GUI) с поддержкой закачек по маске с HTTP, для скачивания кучи файлов с однотипными именами, различающимися только цифрами.

Например:
http://www.cfa.harvard.edu/mpec/K09/K09E*.html

где * - номер с 00 по 39


это конечно не гуй, но решение:

Код: Выделить всё

for i in `seq -w 0 39`; do wget  http://www.cfa.harvard.edu/mpec/K09/K09E"$i".html; done


PS на счет параметров wget надо man глянуть

PPS вообще в wget есть различные графические фронтэнды. Может быть и в самом wget можно указывать шаблоны. Не знаю, ни разу не пользовался.
Внимание: У меня под рукой нет машины с Linux. Я не использую эту ОС. Ответы я даю либо по памяти, либо мне помогает гугл. Тщательно читайте маны по тем командам и конфигурационным файлам, которые я упоминаю.

0xDEFEC8ED
Спасибо сказали:
Аватара пользователя
sash-kan
Администратор
Сообщения: 13939
Статус: oel ngati kameie
ОС: GNU

Re: нужен менеджер закачек HTTP с поддержкой закачек по маске

Сообщение sash-kan »

nesk писал(а):
05.03.2009 15:16
Может быть и в самом wget можно указывать шаблоны.

можно. но только в плане: это качаем, это не качаем. а для получения списка нужно чтобы:
либо сервер отдавал список файлов в каталоге (в приведённом выше примере не отдаёт);
либо сгенерировать нужные имена по образцу, данному уважаемым nesk-ом.

одно замечание к образцу: эффективнее будет скормить все ссылки одной команде wget, а не вызывать её в цикле. типа так:
$ for i in $(seq -w 00 39); do echo "http://www.cfa.harvard.edu/mpec/K09/K09E${i}.html"; done | xargs wget
Писать безграмотно - значит посягать на время людей, к которым мы адресуемся, а потому совершенно недопустимо в правильно организованном обществе. © Щерба Л. В., 1957
при сбоях форума см.блог
Спасибо сказали:
R1a
Сообщения: 6

Re: нужен менеджер закачек HTTP с поддержкой закачек по маске

Сообщение R1a »

спасибо, помогло.

вопрос остаётся в силе.
Изображение
Спасибо сказали:
pcodr
Сообщения: 283
ОС: Debian

Re: нужен менеджер закачек HTTP с поддержкой закачек по маске

Сообщение pcodr »

сurl умеет

Код: Выделить всё

curl 'http://www.cfa.harvard.edu/mpec/K09/K09E[01-33].html' -O
remote system type is unix
Спасибо сказали:
Аватара пользователя
nesk
Сообщения: 2268
Статус: Линукссаксовец
ОС: MS Windows XP Home SP3

Re: нужен менеджер закачек HTTP с поддержкой закачек по маске

Сообщение nesk »

pcodr писал(а):
06.03.2009 09:16
сurl умеет


Отлично! Теперь берем гугл и ищем графический front-end к cURL ( http://www.google.ru/search?q=curl+gui )

Первая же ссылка http://www.martin-achern.de/wgetgui/curlgui.html
ну там дальше можно покопаться, думаю это не единственный GUI
Внимание: У меня под рукой нет машины с Linux. Я не использую эту ОС. Ответы я даю либо по памяти, либо мне помогает гугл. Тщательно читайте маны по тем командам и конфигурационным файлам, которые я упоминаю.

0xDEFEC8ED
Спасибо сказали:
R1a
Сообщения: 6

Re: нужен менеджер закачек HTTP с поддержкой закачек по маске

Сообщение R1a »

pcodr писал(а):
06.03.2009 09:16
сurl умеет

Код: Выделить всё

curl 'http://www.cfa.harvard.edu/mpec/K09/K09E[01-33].html' -O


Вот это выглядит проще и удобнее. спасибо.

Я уже практически обошёлся без гуёв. Задача была в том, чтобы сразу дать много команд скачки по маске, а с командной строкой приходилось ждать завершения предыдущей.

Жаль, что нет многофункциональных гуёвых user-friendly программ под линукс типа download master, flashget или reget.
Изображение
Спасибо сказали:
Аватара пользователя
nesk
Сообщения: 2268
Статус: Линукссаксовец
ОС: MS Windows XP Home SP3

Re: нужен менеджер закачек HTTP с поддержкой закачек по маске

Сообщение nesk »

поищите на форуме по словам:
R1a писал(а):
06.03.2009 12:54
download master, flashget или reget.

Есть много тем. может найдете аналог.
Внимание: У меня под рукой нет машины с Linux. Я не использую эту ОС. Ответы я даю либо по памяти, либо мне помогает гугл. Тщательно читайте маны по тем командам и конфигурационным файлам, которые я упоминаю.

0xDEFEC8ED
Спасибо сказали:
Аватара пользователя
Seclorum
Сообщения: 45
ОС: Gentoo Linux (No Windows)

Re: нужен менеджер закачек HTTP с поддержкой закачек по маске

Сообщение Seclorum »

Можете глянуть:
httrack - http://www.httrack.com/
Спасибо сказали: