Скачать весь сайт с помощью Wget

Модератор: /dev/random

Ответить
leha2000
Сообщения: 18
ОС: Gentoo, Arch

Скачать весь сайт с помощью Wget

Сообщение leha2000 »

Здравствуйте Уважаемые спецы

Вот понадобилось мне тут слить вебстраницу целиком, со всеми внешними страницами, на которые есть ссылками в контексте...

Нагуглил для этого следующие опции

wget -r -l 10 -o log URL

Но почему-то по ссылкам wget всё равно идти не хочет, а качает только корневой хтмл с картинками...

user@host

leha@work ~/google/11/html_rev $ rm -rf * leha@work ~/google/11/html_rev $ wget -r -l 10 -o log https://fa3ade558bbaae96c4288ba83203ffec7bd...sfasc-html.html leha@work ~/google/11/html_rev $ ls host log robots.txt leha@work ~/google/11/html_rev $ ls host/ 0B4R8_5EiDMo1WDZMb0tUUmd0bVE leha@work ~/google/11/html_rev $ ls host/0B4R8_5EiDMo1WDZMb0tUUmd0bVE/ rusfasc001.png rusfasc026.png rusfasc051.png rusfasc076.png rusfasc002.png rusfasc027.png rusfasc052.png rusfasc077.png rusfasc003.png rusfasc028.png rusfasc053.png rusfasc078.png rusfasc004.png rusfasc029.png rusfasc054.png rusfasc079.png rusfasc005.png rusfasc030.png rusfasc055.png rusfasc080.png rusfasc006.png rusfasc031.png rusfasc056.png rusfasc081.png rusfasc007.png rusfasc032.png rusfasc057.png rusfasc082.png rusfasc008.png rusfasc033.png rusfasc058.png rusfasc083.png rusfasc009.png rusfasc034.png rusfasc059.png rusfasc084.png rusfasc010.png rusfasc035.png rusfasc060.png rusfasc085.png rusfasc011.png rusfasc036.png rusfasc061.png rusfasc086.png rusfasc012.png rusfasc037.png rusfasc062.png rusfasc087.png rusfasc013.png rusfasc038.png rusfasc063.png rusfasc088.png rusfasc014.png rusfasc039.png rusfasc064.png rusfasc089.png rusfasc015.png rusfasc040.png rusfasc065.png rusfasc090.png rusfasc016.png rusfasc041.png rusfasc066.png rusfasc091.png rusfasc017.png rusfasc042.png rusfasc067.png rusfasc092.png rusfasc018.png rusfasc043.png rusfasc068.png rusfasc093.png rusfasc019.png rusfasc044.png rusfasc069.png rusfasc094.png rusfasc020.png rusfasc045.png rusfasc070.png rusfasc095.png rusfasc021.png rusfasc046.png rusfasc071.png rusfasc096.png rusfasc022.png rusfasc047.png rusfasc072.png rusfasc-html.html rusfasc023.png rusfasc048.png rusfasc073.png rusfasc024.png rusfasc049.png rusfasc074.png rusfasc025.png rusfasc050.png rusfasc075.png leha@work ~/google/11/html_rev $



Что я делаю не так?
Спасибо сказали:
Аватара пользователя
alv
Бывший модератор
Сообщения: 7274
Статус: Пенсионер в законе
ОС: Cintu
Контактная информация:

Re: Скачать весь сайт с помощью Wget

Сообщение alv »

leha2000 писал(а):
04.03.2015 18:32
Но почему-то по ссылкам wget всё равно идти не хочет, а качает только корневой хтмл с картинками...

потому что всё остальное, кроме картинок, генерится динамически
обсуждается в соседнем топике, посмотрите
Спасибо сказали:
leha2000
Сообщения: 18
ОС: Gentoo, Arch

Re: Скачать весь сайт с помощью Wget

Сообщение leha2000 »

alv писал(а):
04.03.2015 18:58
потому что всё остальное, кроме картинок, генерится динамически
обсуждается в соседнем топике, посмотрите

Это в том, который про ютуб?
Я может чего-то недопонимаю, но если смотреть исходный код страницы, то я вижу там ссылки, рабочие ссылки, как они могут генериться автоматически, если они уже в html файле присутствуют???
Спасибо сказали:
kotnaton
Сообщения: 234

Re: Скачать весь сайт с помощью Wget

Сообщение kotnaton »

"соседний топпик" - это тут

alv а ему не подойдет httrack ?
бывает же такое ???
Спасибо сказали:
Аватара пользователя
Bizdelnick
Модератор
Сообщения: 20752
Статус: nulla salus bello
ОС: Debian GNU/Linux

Re: Скачать весь сайт с помощью Wget

Сообщение Bizdelnick »

Если речь о внешних ссылках, то добавьте -H. Но глубину рекурсии советую уменьшить.
Пишите правильно:
в консоли
вку́пе (с чем-либо)
в общем
вообще
в течение (часа)
новичок
нюанс
по умолчанию
приемлемо
проблема
пробовать
трафик
Спасибо сказали:
leha2000
Сообщения: 18
ОС: Gentoo, Arch

Re: Скачать весь сайт с помощью Wget

Сообщение leha2000 »

Bizdelnick писал(а):
04.03.2015 20:53
Если речь о внешних ссылках, то добавьте -H. Но глубину рекурсии советую уменьшить.

Спасибо, вроде пошло :)
Спасибо сказали:
Ответить