wget: создание локальной копии сайта

GNU Wget - это пакет свободного программного обеспечения для получения файлов с помощью HTTP, HTTPS, FTP и FTPS.

Содержание

Создание локальной копии сайта

Для создание локальной копии сайта wget имеет встроенный функционал рекурсивного обхода и преобразования ссылок.

wget -r -l5 -k http://example.com/

1	wget -r -l5 -k http://example.com/

-r - рекурсивный обход ссылок

-l5 - глубина обхода, в данном примере до 5 уровня.

-k -преобразование ссылок в локальные.

wget http://example.com/file.dat

1	wget http://example.com/file.dat

wget -P /home http://example.com/file.dat

1	wget -P /home http://example.com/file.dat

wget -i /home/user/url.list

1	wget -i /home/user/url.list

wget --user=<login> --password=<password> ftp://example.com/file.dat

1	wget --user=<login> --password=<password> ftp://example.com/file.dat

wget -b http://example.com/file.dat

1	wget -b http://example.com/file.dat

wget -c http://example.com/file.dat

1	wget -c http://example.com/file.dat

При использовании само подписанных сертификатов на сайте

wget https://example.com/file.dat --no-check-certificate

1	wget https://example.com/file.dat --no-check-certificate