* [Comm] Проблемы с wget @ 2002-09-27 9:39 Александр Никольников 2002-09-27 9:40 ` Leonid Sysoletin 0 siblings, 1 reply; 7+ messages in thread From: Александр Никольников @ 2002-09-27 9:39 UTC (permalink / raw) To: community Привет ! Что у нас творится с wget`ом ? 1. Берём wget-1.8.2, пытаемся рекурсивно стянуть с ftp каталог с файлами: wget -c -m -l 2 ftp://xxx.yyy.zzz/dir/ - облом: вытягивается только index.html со списком файлов. 2. Берём старый wget-1.5.1 - всё стягивается нормально. Доступ в инет у меня через проксю (squid). -- Саша ^ permalink raw reply [flat|nested] 7+ messages in thread
* Re: [Comm] Проблемы с wget 2002-09-27 9:39 [Comm] Проблемы с wget Александр Никольников @ 2002-09-27 9:40 ` Leonid Sysoletin 2002-09-27 9:54 ` Александр Никольников 0 siblings, 1 reply; 7+ messages in thread From: Leonid Sysoletin @ 2002-09-27 9:40 UTC (permalink / raw) To: community Пятница, 27 Сентябрь 2002 13:39, Александр Никольников написал: > Что у нас творится с wget`ом ? > 1. Берём wget-1.8.2, пытаемся рекурсивно стянуть с ftp каталог с файлами: > wget -c -m -l 2 ftp://xxx.yyy.zzz/dir/ - облом: вытягивается только > index.html со списком файлов. man wget Нужная вам опция называется -r -- Л. Сысолетин, webmaster@unicon-ms.ru [Team Ёжики-рулез!] [Team Котёнки на солярке] [Team Берегите букву "ё"!] "While not obviously a business-friendly license there are certain aspects of the GNU license which are attractive, believe it or not, for commercial purposes." -- Brian Behlendorf on OSS (Open Sources, 1999 O'Reilly and Associates) ^ permalink raw reply [flat|nested] 7+ messages in thread
* Re: [Comm] Проблемы с wget 2002-09-27 9:40 ` Leonid Sysoletin @ 2002-09-27 9:54 ` Александр Никольников 2002-09-27 9:57 ` Leonid Sysoletin 2002-09-27 10:23 ` [Comm] Re[2]: " Alexey Pristavkin 0 siblings, 2 replies; 7+ messages in thread From: Александр Никольников @ 2002-09-27 9:54 UTC (permalink / raw) To: community On Fri, Sep 27, 2002 at 01:40:51PM +0400, Leonid Sysoletin wrote: > Пятница, 27 Сентябрь 2002 13:39, Александр Никольников написал: > > Что у нас творится с wget`ом ? > > 1. Берём wget-1.8.2, пытаемся рекурсивно стянуть с ftp каталог с файлами: > > wget -c -m -l 2 ftp://xxx.yyy.zzz/dir/ - облом: вытягивается только > > index.html со списком файлов. > > man wget > > Нужная вам опция называется -r Тоже самое. Не тянет :( Через прокси не тянет. А напрямую очень даже. Сломали хорошую программу :(( -- Саша ^ permalink raw reply [flat|nested] 7+ messages in thread
* Re: [Comm] Проблемы с wget 2002-09-27 9:54 ` Александр Никольников @ 2002-09-27 9:57 ` Leonid Sysoletin 2002-09-27 11:06 ` Александр Никольников 2002-09-27 10:23 ` [Comm] Re[2]: " Alexey Pristavkin 1 sibling, 1 reply; 7+ messages in thread From: Leonid Sysoletin @ 2002-09-27 9:57 UTC (permalink / raw) To: community Пятница, 27 Сентябрь 2002 13:54, Александр Никольников написал: > > > Что у нас творится с wget`ом ? > > > 1. Берём wget-1.8.2, пытаемся рекурсивно стянуть с ftp каталог с > > > файлами: wget -c -m -l 2 ftp://xxx.yyy.zzz/dir/ - облом: вытягивается > > > только index.html со списком файлов. > > Нужная вам опция называется -r > Тоже самое. > Не тянет :( > Через прокси не тянет. А не попадают ли нужные страницы в список отлупливаемых прокси? > А напрямую очень даже. ...очень на то похоже. > Сломали хорошую программу :(( Это вы зря. -- Л. Сысолетин, webmaster@unicon-ms.ru [Team Ёжики-рулез!] [Team Котёнки на солярке] [Team Берегите букву "ё"!] Смакуя азиатский наш кулич, мы густо над евреями хохочем; в России прогрессивней паралич, светлей Варфоломеевские ночи. ^ permalink raw reply [flat|nested] 7+ messages in thread
* Re: [Comm] Проблемы с wget 2002-09-27 9:57 ` Leonid Sysoletin @ 2002-09-27 11:06 ` Александр Никольников 0 siblings, 0 replies; 7+ messages in thread From: Александр Никольников @ 2002-09-27 11:06 UTC (permalink / raw) To: community On Fri, Sep 27, 2002 at 01:57:03PM +0400, Leonid Sysoletin wrote: > Пятница, 27 Сентябрь 2002 13:54, Александр Никольников написал: > > > > Что у нас творится с wget`ом ? > > > > 1. Берём wget-1.8.2, пытаемся рекурсивно стянуть с ftp каталог с > > > > файлами: wget -c -m -l 2 ftp://xxx.yyy.zzz/dir/ - облом: вытягивается > > > > только index.html со списком файлов. > > > Нужная вам опция называется -r > > Тоже самое. > > Не тянет :( > > Через прокси не тянет. > > А не попадают ли нужные страницы в список отлупливаемых прокси? Нет. wget-1.5.1 нормально всё тянет. > > > А напрямую очень даже. > > ...очень на то похоже. > > > Сломали хорошую программу :(( > > Это вы зря. Надеюсь ;) -- Саша ^ permalink raw reply [flat|nested] 7+ messages in thread
* [Comm] Re[2]: [Comm] Проблемы с wget 2002-09-27 9:54 ` Александр Никольников 2002-09-27 9:57 ` Leonid Sysoletin @ 2002-09-27 10:23 ` Alexey Pristavkin 2002-09-27 11:09 ` Александр Никольников 1 sibling, 1 reply; 7+ messages in thread From: Alexey Pristavkin @ 2002-09-27 10:23 UTC (permalink / raw) To: Александр Никольников Hello Александр, Посмотрите нет ли среди вытянутых файлов, файла robots или что-то в этом духе. Я сам долго с этим бодался, оказалось что на сервере можно прописать в этот файл список директорий которые не должны обрабатываться всякими роботами, посиковиками, и, в том числе, wget-ом. Где то в дебрях info wget есть описание ключика отключающего проверку этого файла, но я узнал об этом поздно - просто запретил его скачивание на проксе. Friday, September 27, 2002, 1:54:02 PM, you wrote: АН> On Fri, Sep 27, 2002 at 01:40:51PM +0400, Leonid Sysoletin wrote: >> Пятница, 27 Сентябрь 2002 13:39, Александр Никольников написал: >> > Что у нас творится с wget`ом ? >> > 1. Берём wget-1.8.2, пытаемся рекурсивно стянуть с ftp каталог с файлами: >> > wget -c -m -l 2 ftp://xxx.yyy.zzz/dir/ - облом: вытягивается только >> > index.html со списком файлов. >> >> man wget >> >> Нужная вам опция называется -r АН> Тоже самое. АН> Не тянет :( АН> Через прокси не тянет. АН> А напрямую очень даже. АН> Сломали хорошую программу :(( -- Best regards, Alexey mailto:pristavkin_a@r-and-k.com ^ permalink raw reply [flat|nested] 7+ messages in thread
* Re: [Comm] Re[2]: [Comm] Проблемы с wget 2002-09-27 10:23 ` [Comm] Re[2]: " Alexey Pristavkin @ 2002-09-27 11:09 ` Александр Никольников 0 siblings, 0 replies; 7+ messages in thread From: Александр Никольников @ 2002-09-27 11:09 UTC (permalink / raw) To: community On Fri, Sep 27, 2002 at 02:23:45PM +0400, Alexey Pristavkin wrote: > Hello Александр, > > Посмотрите нет ли среди вытянутых файлов, файла robots или что-то > в этом духе. Я сам долго с этим бодался, оказалось что на сервере > можно прописать в этот файл список директорий которые не должны > обрабатываться всякими роботами, посиковиками, и, в том числе, > wget-ом. Где то в дебрях info wget есть описание ключика > отключающего проверку этого файла, но я узнал об этом поздно - > просто запретил его скачивание на проксе. > robots похоже непричём. Хотя надо по-внимательнее проверить. -- Саша ^ permalink raw reply [flat|nested] 7+ messages in thread
end of thread, other threads:[~2002-09-27 11:09 UTC | newest] Thread overview: 7+ messages (download: mbox.gz / follow: Atom feed) -- links below jump to the message on this page -- 2002-09-27 9:39 [Comm] Проблемы с wget Александр Никольников 2002-09-27 9:40 ` Leonid Sysoletin 2002-09-27 9:54 ` Александр Никольников 2002-09-27 9:57 ` Leonid Sysoletin 2002-09-27 11:06 ` Александр Никольников 2002-09-27 10:23 ` [Comm] Re[2]: " Alexey Pristavkin 2002-09-27 11:09 ` Александр Никольников
ALT Linux Community general discussions This inbox may be cloned and mirrored by anyone: git clone --mirror http://lore.altlinux.org/community/0 community/git/0.git # If you have public-inbox 1.1+ installed, you may # initialize and index your mirror using the following commands: public-inbox-init -V2 community community/ http://lore.altlinux.org/community \ mandrake-russian@linuxteam.iplabs.ru community@lists.altlinux.org community@lists.altlinux.ru community@lists.altlinux.com public-inbox-index community Example config snippet for mirrors. Newsgroup available over NNTP: nntp://lore.altlinux.org/org.altlinux.lists.community AGPL code for this site: git clone https://public-inbox.org/public-inbox.git