Возобновление прерванного wget всего сайта, не начиная с самого начала

Я загружаю веб-сайт с помощью этой команды wget:

wget \
 --recursive \
 --no-clobber \
 --page-requisites \
 --html-extension \
 --convert-links \
 --restrict-file-names=windows \
 --domains website.org \
 --wait=10 \
 --limit-rate=30K \
    www.domain.org/directory/something.html

Я хотел использовать опции --wait и --limit-rate, чтобы избежать перегрузки сайта. Моя загрузка шла нормально, но через 24 часа она была прервана. Я думал, что смогу возобновить, просто используя опцию --no-clobber, но, хотя wget не перезаписывает файлы, которые он уже загружал, он все еще ждет 10 секунд после проверки каждого из них.

Есть ли способ заставить wget ждать только, если он действительно должен загрузить файл, таким образом ускоряя процесс проверки, пока я не достигну точки, в которой находился? Каков был бы лучший способ сделать это?

Благодарю.

0 ответов

Другие вопросы по тегам