[Comm] wget quota

[Comm] wget quota

["Дворников М.В."]

Master 2.4. Wget 1.10.1.
Пытаюсь разбить закачку большого файла на несколько дней.
Для пробы ввожу размер квоты:
wget --quota=10k http://ftp.chg.ru/pub/OpenOffice.zip

Wget cкачивает свыше квоты, не обращая внимания на ограничения.
-- 
С уважением, Дворников Михаил.

Re: [Comm] wget quota

[Vitaly Ostanin]

[-- Attachment #1: Type: text/plain, Size: 392 bytes --]

Дворников М.В. пишет:
> Master 2.4. Wget 1.10.1.
> Пытаюсь разбить закачку большого файла на несколько дней.
> Для пробы ввожу размер квоты:
> wget --quota=10k http://ftp.chg.ru/pub/OpenOffice.zip
> 
> Wget cкачивает свыше квоты, не обращая внимания на ограничения.

Маны, они рулез, особенно со словами "Note".

-- 
Regards, Vyt
mailto:  vyt@vzljot.ru
JID:     vyt@vzljot.ru


[-- Attachment #2: OpenPGP digital signature --]
[-- Type: application/pgp-signature, Size: 252 bytes --]

Re: [Comm] wget quota

[Pavel Shurubura]

On Mon, 04 Dec 2006 13:00:12 +0300
"Дворников М.В." <m_dvor@soc.adm.yar.ru> wrote:

 Цитата из man wget:

   Note that quota will never affect downloading a single file.
So if you specify wget -Q10k ftp://wuarchive.wustl.edu/ls-lR.gz,
all of the ls-lR.gz will be downloaded.  The same goes even 
when several URLs are specified on the command-line.

  However, quota is respected when retrieving either recursively,
or from an input file.  Thus you may safely type
wget -Q2m -i sites---download will be aborted when the quota
is exceeded.




> Master 2.4. Wget 1.10.1.
> Пытаюсь разбить закачку большого файла на несколько дней.
> Для пробы ввожу размер квоты:
> wget --quota=10k http://ftp.chg.ru/pub/OpenOffice.zip
> 
> Wget cкачивает свыше квоты, не обращая внимания на ограничения.
> -- 
> С уважением, Дворников Михаил.
> _______________________________________________
> Community mailing list
> Community@lists.altlinux.org
> https://lists.altlinux.org/mailman/listinfo/community

-- 
Администратор узла 
ООО "ИТЦ XXI-век"
Шурубура П.Н.

Re: [Comm] wget quota

[Sergey Vlasov]

[-- Attachment #1: Type: text/plain, Size: 871 bytes --]

On Mon, Dec 04, 2006 at 01:00:12PM +0300, "Дворников М.В." wrote:
> Master 2.4. Wget 1.10.1.
> Пытаюсь разбить закачку большого файла на несколько дней.
> Для пробы ввожу размер квоты:
> wget --quota=10k http://ftp.chg.ru/pub/OpenOffice.zip
> 
> Wget cкачивает свыше квоты, не обращая внимания на ограничения.

В документации (man wget) указано, что квота не действует при загрузке
только одного файла:

   Note that quota will never affect downloading a single file.  So if
   you specify wget -Q10k ftp://wuarchive.wustl.edu/ls-lR.gz, all of
   the ls-lR.gz will be downloaded.  The same goes even when several
   URLs are specified on the command-line.  However, quota is
   respected when retrieving either recursively, or from an input
   file.  Thus you may safely type wget -Q2m -i sites---download will
   be aborted when the quota is exceeded.

[-- Attachment #2: Type: application/pgp-signature, Size: 189 bytes --]

Re: [Comm] wget quota

["Дворников М.В."]

Vitaly Ostanin пишет:
> Дворников М.В. пишет:
>> Master 2.4. Wget 1.10.1.
>> Пытаюсь разбить закачку большого файла на несколько дней.
>> Для пробы ввожу размер квоты:
>> wget --quota=10k http://ftp.chg.ru/pub/OpenOffice.zip
>>
>> Wget cкачивает свыше квоты, не обращая внимания на ограничения.
> 
> Маны, они рулез, особенно со словами "Note".

Указать брать URL из файла?
-i url.txt  не работает.
-- 
С уважением, Дворников Михаил.

Re: [Comm] wget quota

["Дворников М.В."]

Sergey Vlasov пишет:
> On Mon, Dec 04, 2006 at 01:00:12PM +0300, "Дворников М.В." wrote:
>> Master 2.4. Wget 1.10.1.
>> Пытаюсь разбить закачку большого файла на несколько дней.
>> Для пробы ввожу размер квоты:
>> wget --quota=10k http://ftp.chg.ru/pub/OpenOffice.zip
>>
>> Wget cкачивает свыше квоты, не обращая внимания на ограничения.
> 
> В документации (man wget) указано, что квота не действует при загрузке
> только одного файла:


Скачивает файл полностью, только потом учитывает квоты?
Ограничивать скорость закачки и рубить через cron?
Чем в таких случаях пользоваться?
-- 
С уважением, Дворников Михаил.

Re: [Comm] wget quota

[Vitaly Ostanin]

[-- Attachment #1: Type: text/plain, Size: 662 bytes --]

Дворников М.В. пишет:
> Vitaly Ostanin пишет:
>> Дворников М.В. пишет:
>>> Master 2.4. Wget 1.10.1.
>>> Пытаюсь разбить закачку большого файла на несколько дней.
>>> Для пробы ввожу размер квоты:
>>> wget --quota=10k http://ftp.chg.ru/pub/OpenOffice.zip
>>>
>>> Wget cкачивает свыше квоты, не обращая внимания на ограничения.
>> Маны, они рулез, особенно со словами "Note".
> 
> Указать брать URL из файла?
> -i url.txt  не работает.

С криками протеста, или пишет что-то значимое?
Ссылки в url.txt должны быть по одной на строку, в конце строки
должен быть перевод строки.

-- 
Regards, Vyt
mailto:  vyt@vzljot.ru
JID:     vyt@vzljot.ru


[-- Attachment #2: OpenPGP digital signature --]
[-- Type: application/pgp-signature, Size: 252 bytes --]

Re: [Comm] wget quota

[Olvin]

Дворников М.В. пишет:
>>>Master 2.4. Wget 1.10.1.
>>>Пытаюсь разбить закачку большого файла на несколько дней.
>>>Для пробы ввожу размер квоты:
>>>wget --quota=10k http://ftp.chg.ru/pub/OpenOffice.zip
>>>Wget cкачивает свыше квоты, не обращая внимания на ограничения.
>>В документации (man wget) указано, что квота не действует при загрузке
>>только одного файла:
> Скачивает файл полностью, только потом учитывает квоты?
> Ограничивать скорость закачки и рубить через cron?
> Чем в таких случаях пользоваться?

попробуйте так:

1. Создать файл, в него пропишите URL файлов, по одному на строку
2. Может быть это важно: после последнего URL _тоже_ должен быть перевод
строки.
3. Укажите в командной строке wget -i файл_с_URL --quota=10k

Сработало?

Re: [Comm] wget quota

["Дворников М.В."]

Olvin пишет:
> Дворников М.В. пишет:
>>>> Master 2.4. Wget 1.10.1.
>>>> Пытаюсь разбить закачку большого файла на несколько дней.
>>>> Для пробы ввожу размер квоты:
>>>> wget --quota=10k http://ftp.chg.ru/pub/OpenOffice.zip
>>>> Wget cкачивает свыше квоты, не обращая внимания на ограничения.
>>> В документации (man wget) указано, что квота не действует при загрузке
>>> только одного файла:
>> Скачивает файл полностью, только потом учитывает квоты?
>> Ограничивать скорость закачки и рубить через cron?
>> Чем в таких случаях пользоваться?
> 
> попробуйте так:
> 
> 1. Создать файл, в него пропишите URL файлов, по одному на строку
> 2. Может быть это важно: после последнего URL _тоже_ должен быть перевод
> строки.
> 3. Укажите в командной строке wget -i файл_с_URL --quota=10k
> 
> Сработало?

Не работает:
  wget -c -t 0  -Y on  -i ~/wget_url.txt  -P ~/Download --quota=10k
Сначала так и делал, после чего решил URL поставить
прямо в командную строку.
Остается только cron.
-- 
С уважением, Дворников Михаил.

Re: [Comm] wget quota

[Vitaly Ostanin]

[-- Attachment #1: Type: text/plain, Size: 527 bytes --]

Дворников М.В. пишет:

<skipped/>

>> 3. Укажите в командной строке wget -i файл_с_URL --quota=10k
>>
>> Сработало?
> 
> Не работает:
>   wget -c -t 0  -Y on  -i ~/wget_url.txt  -P ~/Download --quota=10k

Поздравляю, вы нашли багу в wget, у меня тоже скачивает больше
квоты, даже по примеру из man wget:
wget -Q2m -i sites

wget-1.10.2-alt1

Можно повесить в
https://bugzilla.altlinux.org/
, если хотите, чтобы исправили.

<skipped/>

-- 
Regards, Vyt
mailto:  vyt@vzljot.ru
JID:     vyt@vzljot.ru


[-- Attachment #2: OpenPGP digital signature --]
[-- Type: application/pgp-signature, Size: 252 bytes --]

Re: [Comm] wget quota

[Pavel Usischev]

Vitaly Ostanin пишет:
>> Не работает:
>>   wget -c -t 0  -Y on  -i ~/wget_url.txt  -P ~/Download --quota=10k
> 
> Поздравляю, вы нашли багу в wget

Возможно, авторы мана имели в виду не то, что вы там прочитали. "Note 
that quota will never affect downloading a single file." Я это понимаю 
так, что останавливать загрузку посередине файла wget вообще никогда не 
будет. Из следующих фраз я понял, что input file с URL-ами упомянут в 
противовес просто перечислению URL-ов в командной строке (с input file 
квота работает, с командной строкой -- нет).

> у меня тоже скачивает больше квоты, даже по примеру из man wget:
> wget -Q2m -i sites

Впрочем, я не знаю, какие файлы должны были качаться согласно вашему 
файлу sites и не утверждаю, что баги нет.

-- 
С уважением,
Павел Усищев

Re: [Comm] wget quota

[Vitaly Ostanin]

[-- Attachment #1: Type: text/plain, Size: 1066 bytes --]

Pavel Usischev пишет:
> Vitaly Ostanin пишет:
>>> Не работает:
>>>   wget -c -t 0  -Y on  -i ~/wget_url.txt  -P ~/Download --quota=10k
>> Поздравляю, вы нашли багу в wget
> 
> Возможно, авторы мана имели в виду не то, что вы там прочитали. "Note 
> that quota will never affect downloading a single file." Я это понимаю 
> так, что останавливать загрузку посередине файла wget вообще никогда не 
> будет. 

Это он зря, параметры надо уважать.

> Из следующих фраз я понял, что input file с URL-ами упомянут в 
> противовес просто перечислению URL-ов в командной строке (с input file 
> квота работает, с командной строкой -- нет).

Всё может быть. Тем не менее это явная бага - либо в логике wget,
либо в мане.

>> у меня тоже скачивает больше квоты, даже по примеру из man wget:
>> wget -Q2m -i sites
> 
> Впрочем, я не знаю, какие файлы должны были качаться согласно вашему 
> файлу sites и не утверждаю, что баги нет.

Там была одна ссылка на Firefox 2.0 (9.2 Mb).

-- 
Regards, Vyt
mailto:  vyt@vzljot.ru
JID:     vyt@vzljot.ru


[-- Attachment #2: OpenPGP digital signature --]
[-- Type: application/pgp-signature, Size: 252 bytes --]