URL: https://www.opennet.ru/cgi-bin/openforum/vsluhboard.cgi
Форум: vsluhforumID3
Нить номер: 1986
[ Назад ]

Исходное сообщение
"Раздел полезных советов: Примеры использования wget и curl для копирования web-контента"

Отправлено auto_tips , 30-Апр-03 16:02 
Копирум ftp.test.ru, за исключением директории /pub/mp3 и помещаем результат в /tmp/test
    wget -m -P/tmp/test -nH ftp://ftp.test.ru/pub/ -X /pub/mp3

Скачиваем файл test.gif со скоростью 10 Кб/с и сохраняем его на локальном диске:
   wget --quiet -O - --timeout=20 --limit-rate 10k http://test.ru/test.gif > /tmp/test.gif
   curl http://test.ru/test.gif --max-time 20 -s -o test.gif

Рекурсивно скачиваем в директорию test_site:
    wget -r --no-parent -P ./test_site http://test.ru/arc/

Доп. опции wget:
  "-O N" - куда выводить результат, "-" - стандартный вывод;
  "-l N" - уровень вложенности;
  "-r" - рекурсивный запрос.
  "--no-parent" - не выходить за пределы родительского каталога;
  "--quota N" - сограничить общий объем выкачиваемого в байтах (можно m и k);
  "--limit-rate N" - ограничить скорость в байт/сек. (10k - 10кб/сек);
  "--referer=URL" - подставить свой referer.


URL:
Обсуждается: https://www.opennet.ru/tips/info/469.shtml


Содержание

Сообщения в этом обсуждении
"Примеры использования wget и curl для копирования web-контента"
Отправлено Nikolaev D. , 30-Апр-03 16:02 
man wget по-любому.

"Примеры использования wget и curl для копирования web-контен..."
Отправлено Asterics , 30-Апр-03 16:27 
>man wget по-любому.

IMHO, есть ситуации когда ради мелочей не стоит в man лезть. Гораздо проще взглянуть на готовый пример, для изо дня в день выполняемых операции, чем каждый раз по несколько минут штудировать man и опасаться не забыл ли чего.

Первый раз выполняешь конечно - man, а если просто не можешь запомнить кучу параметров - проще записать.


"Примеры использования wget и curl для копирования web-контен..."
Отправлено hhg , 25-Июн-08 10:15 
точно ;) периодически забываю "--no-parent" и получаю нехилую кучу мусора

"Примеры использования wget и curl для копирования web-контента"
Отправлено ruffest , 06-Мрт-07 09:14 
мне помогло