Загрузка большого сайта с wget

Я пытаюсь зеркально отразить очень большой сайт, но wget никогда, кажется, не заканчивается правильно. Я использую команду:

wget -r -l inf -nc -w 0.5 {the-site}

Я загрузил хорошую часть сайта, но не всего этого. Содержание не изменяется достаточно быстро, чтобы потрудиться использовать добавление метки времени.

После выполнения в течение ночи, появляется это сообщение:

File `{filename}.html' already there; not retrieving.
File `{filename}.html' already there; not retrieving.
File `{filename}.html' already there; not retrieving.
File `{filename}.html' already there; not retrieving.
Killed

Кто-либо знает то, что происходит и как я могу зафиксировать его?

1
задан 15.06.2010, 20:09

1 ответ

Вы попытались использовать'-m'опция?
это - короткий путь для,

- N-r-l inf - no-remove-listing

Можно также экспериментировать конкретно с сайтом с помощью более глубокого URL для ограниченного набора файлов и постараться не выбирать родительские пути с,

- np

1
ответ дан 17.12.2019, 00:40

Теги

Похожие вопросы