Итак, есть некий сайт-докумментация, который сгенерирован программой типа doxygen. Необходимо его отзеркалить к себе. Проблема в том, что каждый *.html файл лежит в архиве *.gz. В браузере все отображается.
Ни одна "качалка" не скачивает такой сайт, вернее скачивает файлы как архивы и останавливается...
Что тут можно сделать?
Может конвеер zcat и wget организовать, но как? Я пока не совсем в этом деле курю.
Или послать с wget заголовок что-то типа "deflate/gzip" как он там называется?
Проблема отзеркалить сайт.
Модератор: Bizdelnick
-
elide
- Бывший модератор
- Сообщения: 2421
- Статус: Übermensch
- ОС: лялих
-
valeri_ufo
- Бывший модератор
- Сообщения: 274
- Статус: Everywhere, yet nowhere
-
The-S
- Сообщения: 16
Re: Проблема отзеркалить сайт.
так дай ссылку на сайт-то. мы же тут не телепаты...
http://unreal.student.utwente.nl/uncodex-ut2004/
А зачем ссылка? Я же и так проблему объяснил.
-
elide
- Бывший модератор
- Сообщения: 2421
- Статус: Übermensch
- ОС: лялих
Re: Проблема отзеркалить сайт.
был когда-то патч для wget, который это дело раскуривал.
только он был глючный, в wget его не включили.
поэтому придётся обходиться подручными средствами.
можно, например, написать проксю, которая будет на лету разжимать данные, и пустить wget через нее. делов минут на 15.
только он был глючный, в wget его не включили.
поэтому придётся обходиться подручными средствами.
можно, например, написать проксю, которая будет на лету разжимать данные, и пустить wget через нее. делов минут на 15.
слава роботам!