[sisyphus] I: новая сборка squidGuard в Daedalus

[sisyphus] I: новая сборка squidGuard в Daedalus

[Vladimir Lettiev]

Привет всем.
В Daedalus находится новая сборка squidGuard.
SquidGuard - это быстрый и мощный фильтр, редиректор для Squid.

Изменений достаточно много:

* Включен новый blacklist. Он представляет собой объединение 
blacklist'ов с squidGuard.org, MESD, rejik.ru, а также подборка 
domains/urls, которую мне прислал Mike Lykov.

* Blacklist'ы теперь находятся в /var/lib/squidGuard/db, и при установке 
пакета, %post-script автоматически формирует базы squidGuard в Berkeley 
DB формат (.db) - это обеспечивает значительное увеличение скорости 
"взлёта" squid при запуске/перезагрузке (особенно при большом кол-ве 
одновременно запускаемых копий squidGuard).

* Добавлены две утилиты для работы с blacklist базами (.db - формат):
	sg-search - поиск domain/url в базах,
	sg-mod - модификация записей (добавление/удаление/замена).
(для их использования нет необходимости привилегий root, вполне 
достаточно силёнок пользователя squid: `sudo -u squid sg-search ...`)

* Добавлен squidGuard-ru.cgi - cgi-скрипт, который на чистом koi8-r 
излагает пользователю причину, по которой был блокирован запрошенный URL 
(для работы скрипта требуется наличие установленного пакета perl-CGI). 
Помимо русификации, там исправлена проблемка с заголовками Expires, 
которая лично мне доставляла определённые проблемы: так как формат 
expires не соотвествовал стандартам rfc2068, то браузеры его 
игнорировали и кэшировали страницы с ошибками - что иногда приводило к 
недоразумениям.

Прошу всех, кто использует данный пакет, высказывать свои мнения и 
пожелания. Если сборка устраивает, то squidGuard переедет в Сизиф.

-- 
С уважением, Владимир Леттиев aka crux <crux@syktsu.ru>

Re: [sisyphus] I: новая сборка squidGuard в Daedalus

[Alexander Markelov]

Vladimir Lettiev пишет:

> Привет всем.
> В Daedalus находится новая сборка squidGuard.
> SquidGuard - это быстрый и мощный фильтр, редиректор для Squid.
>
> Изменений достаточно много:
>
> * Включен новый blacklist. Он представляет собой объединение 
> blacklist'ов с squidGuard.org, MESD, rejik.ru, а также подборка 
> domains/urls, которую мне прислал Mike Lykov.
>
> * Blacklist'ы теперь находятся в /var/lib/squidGuard/db, и при 
> установке пакета, %post-script автоматически формирует базы squidGuard 
> в Berkeley DB формат (.db) - это обеспечивает значительное увеличение 
> скорости "взлёта" squid при запуске/перезагрузке (особенно при большом 
> кол-ве одновременно запускаемых копий squidGuard).
>
> * Добавлены две утилиты для работы с blacklist базами (.db - формат):
>     sg-search - поиск domain/url в базах,
>     sg-mod - модификация записей (добавление/удаление/замена).
> (для их использования нет необходимости привилегий root, вполне 
> достаточно силёнок пользователя squid: `sudo -u squid sg-search ...`)
>
> * Добавлен squidGuard-ru.cgi - cgi-скрипт, который на чистом koi8-r 
> излагает пользователю причину, по которой был блокирован запрошенный 
> URL (для работы скрипта требуется наличие установленного пакета 
> perl-CGI). Помимо русификации, там исправлена проблемка с заголовками 
> Expires, которая лично мне доставляла определённые проблемы: так как 
> формат expires не соотвествовал стандартам rfc2068, то браузеры его 
> игнорировали и кэшировали страницы с ошибками - что иногда приводило к 
> недоразумениям.
>
> Прошу всех, кто использует данный пакет, высказывать свои мнения и 
> пожелания. Если сборка устраивает, то squidGuard переедет в Сизиф.
>

Re: [sisyphus] I: новая сборка squidGuard в Daedalus

[Alexander Markelov]

Vladimir Lettiev пишет:

> Привет всем.
> В Daedalus находится новая сборка squidGuard.
> SquidGuard - это быстрый и мощный фильтр, редиректор для Squid.
>
> Изменений достаточно много:
>
> * Включен новый blacklist. Он представляет собой объединение 
> blacklist'ов с squidGuard.org, MESD, rejik.ru, а также подборка 
> domains/urls, которую мне прислал Mike Lykov.
>
> * Blacklist'ы теперь находятся в /var/lib/squidGuard/db, и при 
> установке пакета, %post-script автоматически формирует базы squidGuard 
> в Berkeley DB формат (.db) - это обеспечивает значительное увеличение 
> скорости "взлёта" squid при запуске/перезагрузке (особенно при большом 
> кол-ве одновременно запускаемых копий squidGuard).
>
> * Добавлены две утилиты для работы с blacklist базами (.db - формат):
>     sg-search - поиск domain/url в базах,
>     sg-mod - модификация записей (добавление/удаление/замена).
> (для их использования нет необходимости привилегий root, вполне 
> достаточно силёнок пользователя squid: `sudo -u squid sg-search ...`)
>
> * Добавлен squidGuard-ru.cgi - cgi-скрипт, который на чистом koi8-r 
> излагает пользователю причину, по которой был блокирован запрошенный 
> URL (для работы скрипта требуется наличие установленного пакета 
> perl-CGI). Помимо русификации, там исправлена проблемка с заголовками 
> Expires, которая лично мне доставляла определённые проблемы: так как 
> формат expires не соотвествовал стандартам rfc2068, то браузеры его 
> игнорировали и кэшировали страницы с ошибками - что иногда приводило к 
> недоразумениям.
>
> Прошу всех, кто использует данный пакет, высказывать свои мнения и 
> пожелания. Если сборка устраивает, то squidGuard переедет в Сизиф.
>
Извиняюсь за прошлый пустой пост, случайно отправку нажал.
Чудесная программа работает как надо, вот только с sg-search и sg-mod 
никак немогу разобраться как работают.
Есть большой по объему список db/ads/domains добавляю туда сайт sg-mod 
add db/ads/domains ar.atwola.com . Пишет что все ок добавлен делаю 
service squid reload захожу на ar.atwola.com пускает... удаляю sg-mod 
del db/ads/domains ar.atwola.com . Пишет что удалено. Делаю sg-search 
ALL ar.atwola.com , говорит нет такого сайта запускаю mc иду в 
/var/lib/squidGuard/db/ads делаю F3 на domains.db потом F7 ar.atwola.com 
находит таки такую строчку в файле, чепуха какая то. С только что 
созданной пустой базой local-block все манипуляции с программами sg-mod 
и sg-search проходят на ура. Блокирует, разблокирует сквид пускает или 
не пускает все работает. А c ads только так, руками правим domains а 
потом squidGuard -C db/ads/domains только тогда все правильно 
прописывается и сквид начинает пускать или не пускать.
Есть какие мнения ?

Re: [sisyphus] I: новая сборка squidGuard в Daedalus

[Vladimir Lettiev]

Alexander Markelov wrote:
>> Прошу всех, кто использует данный пакет, высказывать свои мнения и 
>> пожелания. Если сборка устраивает, то squidGuard переедет в Сизиф.
>>
> Чудесная программа работает как надо, вот только с sg-search и sg-mod 
> никак немогу разобраться как работают.
> Есть большой по объему список db/ads/domains добавляю туда сайт sg-mod 
> add db/ads/domains ar.atwola.com . Пишет что все ок добавлен делаю 
> service squid reload захожу на ar.atwola.com пускает... удаляю sg-mod 
> del db/ads/domains ar.atwola.com . Пишет что удалено. Делаю sg-search 
> ALL ar.atwola.com , говорит нет такого сайта запускаю mc иду в 
> /var/lib/squidGuard/db/ads делаю F3 на domains.db потом F7 ar.atwola.com 
> находит таки такую строчку в файле, чепуха какая то. С только что 
> созданной пустой базой local-block все манипуляции с программами sg-mod 
> и sg-search проходят на ура. Блокирует, разблокирует сквид пускает или 
> не пускает все работает. А c ads только так, руками правим domains а 
> потом squidGuard -C db/ads/domains только тогда все правильно 
> прописывается и сквид начинает пускать или не пускать.
> Есть какие мнения ?
> 

Прежде всего хочу сказать то, что забыл написать в релизе.

Крайне нежелательно делать какие-либо изменения в дефолтных базах. Если 
что-то нужно пропускать -- прописываете домен/урл в local-ok, если 
что-то нужно запретить в local-block или завести дополнительные 
domain/url листы в каталогах db/ads, db/agressive, ...
Почему? Потому что при следующем обновлении пакета вы _потеряете_ все 
ваши изменения. Базы обновляется чуть ли не ежедневно, удаляются 
ошибочные записи, добавляются новые. Поэтому важно все изменения хранить 
в стороночке от дефолтных баз -- так надёжнее, да и нагляднее, также 
можете высылать мне свои базы, я их буду включать в последующие релизы 
(возможно базы будут выненсены в отдельный пакет).

Теперь, что касается обнаруженной ошибки - это баг в sg-mod. На днях 
залью обновление.


-- 
С уважением, Владимир Леттиев aka crux <crux@syktsu.ru>