Rip веб-сайт через HTTP для загрузки изображений, HTML и CSS

Хорошее, Бесплатное Решение:HTTrack

HTTrack это бесплатная (GPL, libre/free software) и простая в использовании утилита для автономного браузера.

Это позволяет загружать веб-сайт из интернета в локальный каталог, рекурсивно строить все каталоги, получать HTML, изображения и другие файлы с сервера на ваш компьютер. HTTrack организует относительную структуру ссылок исходного сайта. Просто откройте страницу "зеркального" сайта в Ваш браузер и вы можете просматривать сайт от ссылки к ссылке, как будто вы читаете его в интернете. HTTrack может также обновить существующий зеркальный сайт, и возобновлять прерванные загрузки. HTTrack полностью настраивается и имеет интегрированную справочную систему.

на системах Linux, 'wget' делает это, в значительной степени.

его также портировали на несколько других платформ, как упоминают некоторые другие ответы.

очевидно, что WGet упоминался несколько раз. Лучший пользовательский интерфейс я нашел для него

• VisualWGet

есть некоторые другие UIs для WGet вокруг, некоторые из которых являются кандидатами на худший пользовательский интерфейс вопрос

посмотрите на расширение Scrapbook для firefox. Это делает удивительную работу на этом, а также интегрировать с firebug и позволяет удалять элементы из DOM, прежде чем сохранить, если вы хотите.

вы должны использовать wget - который доступен для большинства платформ. curl не будет рекурсивно запрашивать документы, что является одной из сильных сторон wget.

Линукс: (обычно включен в дистрибутив) http://www.gnu.org/software/wget/

Окна: http://gnuwin32.sourceforge.net/packages/wget.htm

Мак: http://www.geekology.co.za/blog/2009/02/macports-compile-and-install-open-source-software-on-mac-os-x/

пожалуйста, убедитесь, что вы не забивая веб-сайт-настроить подходящие задержки между запросами, и убедитесь, что это в рамках сайта условия предоставления услуг.

-Adam

на самом деле, следуя моему комментарию в посте GWLlosa, я только что вспомнил, что у меня установлен GnuWin32, и, конечно же, он содержит порт Windows wget.

http://sourceforge.net/projects/gnuwin32/

GnuWin32 provides Win32-versions of GNU tools,
or tools with a similar open source licence.
The ports are native ports, that is they rely
only on libraries provided with any 32-bits
MS-Windows operating system, such as
MS-Windows 95 / 98 / 2000 / NT / XP

Я использовал это несколько лет назад и он работал хорошо. Только окна. Раньше рекламного ПО, но больше не, по-видимому:

http://www.webreaper.net/

Я думаю IDM сайт граббер - это лучшее решение, там тоже Телепорт про

Скачать Бесплатно Manager смогите загрузить полные вебсайты также.

Windows, только я думаю.