From mboxrd@z Thu Jan  1 00:00:00 1970
Return-Path: <glacs-smoke-room@m.gmane.org>
X-Injected-Via-Gmane: http://gmane.org/
To: smoke-room@altlinux.ru
From: "Nick S. Grechukh" <nick.grechukh@bigmir.net>
Subject: Re: [room] robots.txt
Date: Sun, 17 Jul 2005 08:23:44 +0300
Message-ID: <dbcq10$pgd$1@sea.gmane.org>
References: <20050716103554.1B8D1B03E@pechkin.sputnikmedia.net>
	<e12fd2db0507160520b1a4f8e@mail.gmail.com>
	<20050716131248.GE6186@wrars-comp.wrarsdomain>
	<e12fd2db05071607256147ec2c@mail.gmail.com>
Mime-Version: 1.0
Content-Type: text/plain; charset=koi8-r
Content-Transfer-Encoding: 8Bit
X-Complaints-To: usenet@sea.gmane.org
X-Gmane-NNTP-Posting-Host: elf.zp.ua
User-Agent: KNode/0.9.1
Sender: news <news@sea.gmane.org>
X-BeenThere: smoke-room@altlinux.ru
X-Mailman-Version: 2.1.5
Precedence: list
Reply-To: =?koi8-r?b?y9XM2NTV0s7ZyiDPxtTP0MnL?= <smoke-room@altlinux.ru>
List-Id: =?koi8-r?b?y9XM2NTV0s7ZyiDPxtTP0MnL?= <smoke-room.altlinux.ru>
List-Unsubscribe: <https://lists.altlinux.ru/mailman/listinfo/smoke-room>,
	<mailto:smoke-room-request@altlinux.ru?subject=unsubscribe>
List-Archive: <http://lists.altlinux.ru/pipermail/smoke-room>
List-Post: <mailto:smoke-room@altlinux.ru>
List-Help: <mailto:smoke-room-request@altlinux.ru?subject=help>
List-Subscribe: <https://lists.altlinux.ru/mailman/listinfo/smoke-room>,
	<mailto:smoke-room-request@altlinux.ru?subject=subscribe>
X-List-Received-Date: Sun, 17 Jul 2005 05:24:02 -0000
Archived-At: <http://lore.altlinux.org/smoke-room/dbcq10$pgd$1@sea.gmane.org/>
List-Archive: <http://lore.altlinux.org/smoke-room/>
List-Post: <mailto:smoke-room@lists.altlinux.org>

Eugene Ostapets wrote:
> 16.07.05, Andrey Rahmatullin<wrar altlinux.ru> написал(а):
>> On Sat, Jul 16, 2005 at 03:20:48PM +0300, Eugene Ostapets wrote:
>> > На сколько я помню - это требование к системам индексирования не
>> Так вот "требование" или совет?
> То, что читал я - звучало как требование...

на самом деле, все равно это не может рассматриваться как средство защиты и
соответственно его обхода не было (а если агент не поддерживает robot
exclusion standart? в протоколе http robots.txt не описан :-)

вот когда baida.ru не отдает wget'у 403, и я делаю wget -u Mozilla - это
"взлом" для dmca. потому что server side ограничение.