* [Sysadmins] HA-кластер. Вопрос по SLES
@ 2010-09-29 6:44 Радик Юсупов
2010-09-29 10:51 ` Andrii Dobrovol`s`kii
2010-09-29 12:15 ` Gennadii Redko
0 siblings, 2 replies; 14+ messages in thread
From: Радик Юсупов @ 2010-09-29 6:44 UTC (permalink / raw)
To: sysadmins
Доброго времени. Пока пятиминутка от работы, предлагаю покурить/попить
чаю на тему HA-кластеризации.
Заказчик имеет купленный SLES, с помощью которого ему нужно организовать
HA-кластеризацию.
Есть вопросы по настройке НА-кластера.
Чтение англоязычной 400-страничной документации мозгов не прибавляет и
понимания тем-более.
Есть ли те, кто строил на ней свои решения и может разъяснить в личной
переписке некоторые вопросы? Возможно за некоторое вознаграждение...
Пишу в рассылку альта, так как это основной мой дистрибутив и я уверен,
что многие системные администраторы выбирают инструмент для решения
задач, что в данном случае имеет место быть.
--
С уважением, инженер отдела ИИС ООО «Центр»
Юсупов Радик Анасович
Usupov.Radik@cg.ru
Тел: (843) 533-88-14 (внут: 1811)
ICQ: 271639884
Jabber: radyus@jabber.ru
Skype: Radik.Usupov
Ekiga: radyus@ekiga.net
Российская Федерация
Казань, ул. Зинина, 3а
420029, а/я 81
http://www.cg.ru/
^ permalink raw reply [flat|nested] 14+ messages in thread
* Re: [Sysadmins] HA-кластер. Вопрос по SLES
2010-09-29 6:44 [Sysadmins] HA-кластер. Вопрос по SLES Радик Юсупов
@ 2010-09-29 10:51 ` Andrii Dobrovol`s`kii
2010-10-01 5:15 ` Радик Юсупов
2010-09-29 12:15 ` Gennadii Redko
1 sibling, 1 reply; 14+ messages in thread
From: Andrii Dobrovol`s`kii @ 2010-09-29 10:51 UTC (permalink / raw)
To: ALT Linux sysadmins' discussion
-----BEGIN PGP SIGNED MESSAGE-----
Hash: SHA256
Радик Юсупов пишет:
> Доброго времени. Пока пятиминутка от работы, предлагаю покурить/попить
> чаю на тему HA-кластеризации.
> Заказчик имеет купленный SLES, с помощью которого ему нужно организовать
> HA-кластеризацию.
> Есть вопросы по настройке НА-кластера.
> Чтение англоязычной 400-страничной документации мозгов не прибавляет и
> понимания тем-более.
> Есть ли те, кто строил на ней свои решения и может разъяснить в личной
> переписке некоторые вопросы? Возможно за некоторое вознаграждение...
>
> Пишу в рассылку альта, так как это основной мой дистрибутив и я уверен,
> что многие системные администраторы выбирают инструмент для решения
> задач, что в данном случае имеет место быть.
>
А что у Вас стоит за HA?
- --
Rgrds,
Andriy
*********************************************************************
email: dobr at iop dot kiev dot ua Kyiv, Ukraine
Phone: (380-44) 525-7824 Department of Gas Electronics
Fax: (380-44) 525-2329 Institute of Physics of NASU
*********************************************************************
-----BEGIN PGP SIGNATURE-----
Version: GnuPG v1.4.10 (GNU/Linux)
Comment: Using GnuPG with Mozilla - http://enigmail.mozdev.org/
iF4EAREIAAYFAkyjGh0ACgkQpBPgR3404hOAqwD+Pj0SThv/opfjb7WS6JEPxRDU
dc7ZmLBZCBRYuXSudncA/RTShFqzyjLOCE/Z8qdGVYvrbR/w/Kw6DByxiUeKOeO2
=ampy
-----END PGP SIGNATURE-----
^ permalink raw reply [flat|nested] 14+ messages in thread
* Re: [Sysadmins] HA-кластер. Вопрос по SLES
2010-09-29 10:51 ` Andrii Dobrovol`s`kii
@ 2010-10-01 5:15 ` Радик Юсупов
0 siblings, 0 replies; 14+ messages in thread
From: Радик Юсупов @ 2010-10-01 5:15 UTC (permalink / raw)
To: sysadmins
29.09.2010 14:51, Andrii Dobrovol`s`kii пишет:
> -----BEGIN PGP SIGNED MESSAGE-----
> Hash: SHA256
>
> Радик Юсупов пишет:
>> Доброго времени. Пока пятиминутка от работы, предлагаю покурить/попить
>> чаю на тему HA-кластеризации.
>> Заказчик имеет купленный SLES, с помощью которого ему нужно организовать
>> HA-кластеризацию.
>> Есть вопросы по настройке НА-кластера.
>> Чтение англоязычной 400-страничной документации мозгов не прибавляет и
>> понимания тем-более.
>> Есть ли те, кто строил на ней свои решения и может разъяснить в личной
>> переписке некоторые вопросы? Возможно за некоторое вознаграждение...
>>
>> Пишу в рассылку альта, так как это основной мой дистрибутив и я уверен,
>> что многие системные администраторы выбирают инструмент для решения
>> задач, что в данном случае имеет место быть.
>>
> А что у Вас стоит за HA?
SLES завязала HA на Pacemaker + openais + corosync...
На сколько я понял, openais базируется на Heartbeart, но ушел от него по
какому-то функционалу и обратной совместимости нет...
Вот в этом-то и проблема на мой взгляд - куча описания под heartbeart,
от которого sles ушла, но мало описания по openais.
И вообщем не очень понятно кто как должен работать..
Вообще. по настройке HA в SLES есть хорошая инструкция на английском
языке...но судя по тому, что из 400 страниц практически 200 - это как
дебажить нерабочие версии, наводит на нехорошие мысли...
--
С уважением, инженер отдела ИИС ООО «Центр»
Юсупов Радик Анасович
Usupov.Radik@cg.ru
Тел: (843) 533-88-14 (внут: 1811)
ICQ: 271639884
Jabber: radyus@jabber.ru
Skype: Radik.Usupov
Ekiga: radyus@ekiga.net
Российская Федерация
Казань, ул. Зинина, 3а
420029, а/я 81
http://www.cg.ru/
^ permalink raw reply [flat|nested] 14+ messages in thread
* Re: [Sysadmins] HA-кластер. Вопрос по SLES
2010-09-29 6:44 [Sysadmins] HA-кластер. Вопрос по SLES Радик Юсупов
2010-09-29 10:51 ` Andrii Dobrovol`s`kii
@ 2010-09-29 12:15 ` Gennadii Redko
2010-09-30 6:14 ` Eugene Prokopiev
1 sibling, 1 reply; 14+ messages in thread
From: Gennadii Redko @ 2010-09-29 12:15 UTC (permalink / raw)
To: ALT Linux sysadmins' discussion
29.09.2010 09:44, Радик Юсупов пишет:
> Доброго времени. Пока пятиминутка от работы, предлагаю покурить/попить
> чаю на тему HA-кластеризации.
> Заказчик имеет купленный SLES, с помощью которого ему нужно организовать
> HA-кластеризацию.
> Есть вопросы по настройке НА-кластера.
> Чтение англоязычной 400-страничной документации мозгов не прибавляет и
> понимания тем-более.
> Есть ли те, кто строил на ней свои решения и может разъяснить в личной
> переписке некоторые вопросы? Возможно за некоторое вознаграждение...
>
> Пишу в рассылку альта, так как это основной мой дистрибутив и я уверен,
> что многие системные администраторы выбирают инструмент для решения
> задач, что в данном случае имеет место быть.
>
Нужно сначала хотя бы для себя написать список событий, которые будут
для Вашего случая являться признаком падения основной ноды.
Если таким признаком будет недоступность сетевого интерфейса основной
ноды для ICMP-пакетов - тогда все просто.
Вот так, например:
http://www.opennet.ru/docs/RUS/ha_cluster/
Другие варианты нужно проектировать...
^ permalink raw reply [flat|nested] 14+ messages in thread
* Re: [Sysadmins] HA-кластер. Вопрос по SLES
2010-09-29 12:15 ` Gennadii Redko
@ 2010-09-30 6:14 ` Eugene Prokopiev
2010-10-01 5:18 ` Радик Юсупов
2010-10-04 5:00 ` Anton Kvashin
0 siblings, 2 replies; 14+ messages in thread
From: Eugene Prokopiev @ 2010-09-30 6:14 UTC (permalink / raw)
To: ALT Linux sysadmins' discussion
29 сентября 2010 г. 16:15 пользователь Gennadii Redko <uit1@zaz.zp.ua> написал:
> 29.09.2010 09:44, Радик Юсупов пишет:
>>
>> Доброго времени. Пока пятиминутка от работы, предлагаю покурить/попить
>> чаю на тему HA-кластеризации.
>> Заказчик имеет купленный SLES, с помощью которого ему нужно организовать
>> HA-кластеризацию.
>> Есть вопросы по настройке НА-кластера.
>> Чтение англоязычной 400-страничной документации мозгов не прибавляет и
>> понимания тем-более.
>> Есть ли те, кто строил на ней свои решения и может разъяснить в личной
>> переписке некоторые вопросы? Возможно за некоторое вознаграждение...
>>
>> Пишу в рассылку альта, так как это основной мой дистрибутив и я уверен,
>> что многие системные администраторы выбирают инструмент для решения
>> задач, что в данном случае имеет место быть.
>>
> Нужно сначала хотя бы для себя написать список событий, которые будут для
> Вашего случая являться признаком падения основной ноды.
> Если таким признаком будет недоступность сетевого интерфейса основной ноды
> для ICMP-пакетов - тогда все просто.
> Вот так, например:
> http://www.opennet.ru/docs/RUS/ha_cluster/
Описываемый там способ настройки Heartbeat давно уже вышел из моды. А
то бы я тоже тогда посоветовал
http://www.samag.ru/art/11.2006/11.2006_02.html ;)
Кстати, что именно планируется кластеризовать и нужен ли мультимастер?
Вопрос к тому, что Heartbeat - довольно страшный монстр и его
использование не всегда оправдано.
--
С уважением,
Прокопьев Евгений
^ permalink raw reply [flat|nested] 14+ messages in thread
* Re: [Sysadmins] HA-кластер. Вопрос по SLES
2010-09-30 6:14 ` Eugene Prokopiev
@ 2010-10-01 5:18 ` Радик Юсупов
2010-10-01 5:51 ` Eugene Prokopiev
2010-10-06 4:06 ` Anton Kvashin
2010-10-04 5:00 ` Anton Kvashin
1 sibling, 2 replies; 14+ messages in thread
From: Радик Юсупов @ 2010-10-01 5:18 UTC (permalink / raw)
To: sysadmins
30.09.2010 10:14, Eugene Prokopiev пишет:
>>
>> Нужно сначала хотя бы для себя написать список событий, которые будут для
>> Вашего случая являться признаком падения основной ноды.
>> Если таким признаком будет недоступность сетевого интерфейса основной ноды
>> для ICMP-пакетов - тогда все просто.
>> Вот так, например:
>> http://www.opennet.ru/docs/RUS/ha_cluster/
> Описываемый там способ настройки Heartbeat давно уже вышел из моды. А
> то бы я тоже тогда посоветовал
> http://www.samag.ru/art/11.2006/11.2006_02.html ;)
>
> Кстати, что именно планируется кластеризовать и нужен ли мультимастер?
> Вопрос к тому, что Heartbeat - довольно страшный монстр и его
> использование не всегда оправдано.
>
Евгений, спасибо за статью, с удовольствием почитаю!
Кластеризовать планируется банковское ПО и разработчики этого ПО хотят,
чтобы был именно HA.
Хотя я бы предпочел использовать виртуальный IP, который будет
перекидывать пользователей на вторую ноду при недоступности первой...
--
С уважением, инженер отдела ИИС ООО «Центр»
Юсупов Радик Анасович
Usupov.Radik@cg.ru
Тел: (843) 533-88-14 (внут: 1811)
ICQ: 271639884
Jabber: radyus@jabber.ru
Skype: Radik.Usupov
Ekiga: radyus@ekiga.net
Российская Федерация
Казань, ул. Зинина, 3а
420029, а/я 81
http://www.cg.ru/
^ permalink raw reply [flat|nested] 14+ messages in thread
* Re: [Sysadmins] HA-кластер. Вопрос по SLES
2010-10-01 5:18 ` Радик Юсупов
@ 2010-10-01 5:51 ` Eugene Prokopiev
2010-10-01 6:50 ` Michael Shigorin
2010-10-06 4:06 ` Anton Kvashin
1 sibling, 1 reply; 14+ messages in thread
From: Eugene Prokopiev @ 2010-10-01 5:51 UTC (permalink / raw)
To: ALT Linux sysadmins' discussion
1 октября 2010 г. 9:18 пользователь Радик Юсупов <radyus@yandex.ru> написал:
> Кластеризовать планируется банковское ПО и разработчики этого ПО хотят,
> чтобы был именно HA.
> Хотя я бы предпочел использовать виртуальный IP, который будет перекидывать
> пользователей на вторую ноду при недоступности первой...
Странные разработчики ... Кластеризация на прикладном уровне была бы
заведомо эффективнее, а раз уж делать ее они не хотят, то какое им
дело, как вы будете решать эту проблему? Более того, если они
навязывают решение, то было бы логично потребовать с них пошаговые
инструкции ;)
--
С уважением,
Прокопьев Евгений
^ permalink raw reply [flat|nested] 14+ messages in thread
* Re: [Sysadmins] HA-кластер. Вопрос по SLES
2010-10-01 5:51 ` Eugene Prokopiev
@ 2010-10-01 6:50 ` Michael Shigorin
2010-10-01 7:43 ` Радик Юсупов
0 siblings, 1 reply; 14+ messages in thread
From: Michael Shigorin @ 2010-10-01 6:50 UTC (permalink / raw)
To: ALT Linux sysadmins' discussion
On Fri, Oct 01, 2010 at 09:51:38AM +0400, Eugene Prokopiev wrote:
> > Кластеризовать планируется банковское ПО и разработчики этого
> > ПО хотят, чтобы был именно HA.
> Странные разработчики ... Кластеризация на прикладном уровне
> была бы заведомо эффективнее, а раз уж делать ее они не хотят,
> то какое им дело, как вы будете решать эту проблему?
...и тем более брать на себя ответственность, если что не так.
> Более того, если они навязывают решение, то было бы логично
> потребовать с них пошаговые инструкции ;)
Угу.
--
---- WBR, Michael Shigorin <mike@altlinux.ru>
------ Linux.Kiev http://www.linux.kiev.ua/
^ permalink raw reply [flat|nested] 14+ messages in thread
* Re: [Sysadmins] HA-кластер. Вопрос по SLES
2010-10-01 6:50 ` Michael Shigorin
@ 2010-10-01 7:43 ` Радик Юсупов
0 siblings, 0 replies; 14+ messages in thread
From: Радик Юсупов @ 2010-10-01 7:43 UTC (permalink / raw)
To: sysadmins
01.10.2010 10:50, Michael Shigorin пишет:
> On Fri, Oct 01, 2010 at 09:51:38AM +0400, Eugene Prokopiev wrote:
>>> Кластеризовать планируется банковское ПО и разработчики этого
>>> ПО хотят, чтобы был именно HA.
>> Странные разработчики ... Кластеризация на прикладном уровне
>> была бы заведомо эффективнее, а раз уж делать ее они не хотят,
>> то какое им дело, как вы будете решать эту проблему?
> ...и тем более брать на себя ответственность, если что не так.
>
>> Более того, если они навязывают решение, то было бы логично
>> потребовать с них пошаговые инструкции ;)
> Угу.
>
Вы оба правы. Там еще реализация этого ПО довольно кривовата. То есть
при запуске ПО проверяет hostname и он должен быть ОДИНАКОВЫМ на нодах,
по которым он должен скакать. А HA работает тоже по hostname и он должен
быть РАЗНЫМ.
А вообще разработчики этого ПО говорят, что на лине реализоввывали
проект только один раз ито только ПО ставили, а кто настраивал
кластеризацию им вообще не интересно. Вот так-вот.
Вообще тут еще выяснилось, что на HA-кластеризацию у Novell нужно
покупать лицензии... Ужас.
И мне в русской техподдержке так и не смогли объяснить эта лицензия
нужна для работы кластера или для обновлений. Но судя по тому что я ДО
СИХ ПОР не смогу поднять кластер, у меня два вывода - или я таки не
осилил (что вполне допускаю и ищу ктобы мне смог помочь, пусть и за
деньги) или таки нужна лицензия. Хорошо что заказчик хороший попался,
купить лицензию согласились... Я решил подождать и поискать знающих...
--
С уважением, инженер отдела ИИС ООО «Центр»
Юсупов Радик Анасович
Usupov.Radik@cg.ru
Тел: (843) 533-88-14 (внут: 1811)
ICQ: 271639884
Jabber: radyus@jabber.ru
Skype: Radik.Usupov
Ekiga: radyus@ekiga.net
Российская Федерация
Казань, ул. Зинина, 3а
420029, а/я 81
http://www.cg.ru/
^ permalink raw reply [flat|nested] 14+ messages in thread
* Re: [Sysadmins] HA-кластер. Вопрос по SLES
2010-10-01 5:18 ` Радик Юсупов
2010-10-01 5:51 ` Eugene Prokopiev
@ 2010-10-06 4:06 ` Anton Kvashin
1 sibling, 0 replies; 14+ messages in thread
From: Anton Kvashin @ 2010-10-06 4:06 UTC (permalink / raw)
To: ALT Linux sysadmins' discussion
01.10.2010 11:18, Радик Юсупов пишет:
> Кластеризовать планируется банковское ПО и разработчики этого ПО хотят,
> чтобы был именно HA.
> Хотя я бы предпочел использовать виртуальный IP, который будет
> перекидывать пользователей на вторую ноду при недоступности первой...
Запросите описание этого ПО. Где и как хранятся данные, настройки. После
этого вам станет понятно какие данные нужны для передачи на соседний
сервер (следовательно хранить их на DRBD). Дальше, куча статей про все
остальное.
--
Anton Kvashin
^ permalink raw reply [flat|nested] 14+ messages in thread
* Re: [Sysadmins] HA-кластер. Вопрос по SLES
2010-09-30 6:14 ` Eugene Prokopiev
2010-10-01 5:18 ` Радик Юсупов
@ 2010-10-04 5:00 ` Anton Kvashin
2010-10-04 5:17 ` Радик Юсупов
1 sibling, 1 reply; 14+ messages in thread
From: Anton Kvashin @ 2010-10-04 5:00 UTC (permalink / raw)
To: ALT Linux sysadmins' discussion
30.09.2010 12:14, Eugene Prokopiev пишет:
> Кстати, что именно планируется кластеризовать и нужен ли мультимастер?
> Вопрос к тому, что Heartbeat - довольно страшный монстр и его
> использование не всегда оправдано.
Что страшного в Heartbeat? Какие альтернативы и в каких случаях?
--
Anton Kvashin
^ permalink raw reply [flat|nested] 14+ messages in thread
* Re: [Sysadmins] HA-кластер. Вопрос по SLES
2010-10-04 5:00 ` Anton Kvashin
@ 2010-10-04 5:17 ` Радик Юсупов
2010-10-05 15:55 ` Eugene Prokopiev
0 siblings, 1 reply; 14+ messages in thread
From: Радик Юсупов @ 2010-10-04 5:17 UTC (permalink / raw)
To: sysadmins
04.10.2010 09:00, Anton Kvashin пишет:
> 30.09.2010 12:14, Eugene Prokopiev пишет:
>> Кстати, что именно планируется кластеризовать и нужен ли мультимастер?
>> Вопрос к тому, что Heartbeat - довольно страшный монстр и его
>> использование не всегда оправдано.
>
> Что страшного в Heartbeat? Какие альтернативы и в каких случаях?
>
Да, присоединяюсь к вопросу :)
--
С уважением, инженер отдела ИИС ООО «Центр»
Юсупов Радик Анасович
Usupov.Radik@cg.ru
Тел: (843) 533-88-14 (внут: 1811)
ICQ: 271639884
Jabber: radyus@jabber.ru
Skype: Radik.Usupov
Ekiga: radyus@ekiga.net
Российская Федерация
Казань, ул. Зинина, 3а
420029, а/я 81
http://www.cg.ru/
^ permalink raw reply [flat|nested] 14+ messages in thread
* Re: [Sysadmins] HA-кластер. Вопрос по SLES
2010-10-04 5:17 ` Радик Юсупов
@ 2010-10-05 15:55 ` Eugene Prokopiev
2010-10-06 3:52 ` Anton Kvashin
0 siblings, 1 reply; 14+ messages in thread
From: Eugene Prokopiev @ 2010-10-05 15:55 UTC (permalink / raw)
To: ALT Linux sysadmins' discussion
4 октября 2010 г. 9:17 пользователь Радик Юсупов <radyus@yandex.ru> написал:
> 04.10.2010 09:00, Anton Kvashin пишет:
>>
>> 30.09.2010 12:14, Eugene Prokopiev пишет:
>>>
>>> Кстати, что именно планируется кластеризовать и нужен ли мультимастер?
>>> Вопрос к тому, что Heartbeat - довольно страшный монстр и его
>>> использование не всегда оправдано.
>>
>> Что страшного в Heartbeat? Какие альтернативы и в каких случаях?
>>
> Да, присоединяюсь к вопросу :)
http://freesource.info/wiki/Software/HighAvailability
а еще gns@, помнится, собирал для альта редхатовский кластер-менеджер,
о котором ничего ни хорошего, ни плохого я сказать не могу ...
--
С уважением,
Прокопьев Евгений
^ permalink raw reply [flat|nested] 14+ messages in thread
* Re: [Sysadmins] HA-кластер. Вопрос по SLES
2010-10-05 15:55 ` Eugene Prokopiev
@ 2010-10-06 3:52 ` Anton Kvashin
0 siblings, 0 replies; 14+ messages in thread
From: Anton Kvashin @ 2010-10-06 3:52 UTC (permalink / raw)
To: ALT Linux sysadmins' discussion
05.10.2010 21:55, Eugene Prokopiev пишет:
> 4 октября 2010 г. 9:17 пользователь Радик Юсупов<radyus@yandex.ru> написал:
>> 04.10.2010 09:00, Anton Kvashin пишет:
>>> 30.09.2010 12:14, Eugene Prokopiev пишет:
>>>>
>>>> Кстати, что именно планируется кластеризовать и нужен ли мультимастер?
>>>> Вопрос к тому, что Heartbeat - довольно страшный монстр и его
>>>> использование не всегда оправдано.
>>>
>>> Что страшного в Heartbeat? Какие альтернативы и в каких случаях?
>>>
>> Да, присоединяюсь к вопросу :)
>
> http://freesource.info/wiki/Software/HighAvailability
>
> а еще gns@, помнится, собирал для альта редхатовский кластер-менеджер,
> о котором ничего ни хорошего, ни плохого я сказать не могу ...
Если не заниматься вопросами аудита и сборки "своего" heartbeat, то HA
кластер на его основе очевидное решение. В сети достаточно документации,
есть в пакетной базе (работал с ним в ubuntu), по конфигурации и работе
проблем не было.
--
Anton Kvashin
^ permalink raw reply [flat|nested] 14+ messages in thread
end of thread, other threads:[~2010-10-06 4:06 UTC | newest]
Thread overview: 14+ messages (download: mbox.gz / follow: Atom feed)
-- links below jump to the message on this page --
2010-09-29 6:44 [Sysadmins] HA-кластер. Вопрос по SLES Радик Юсупов
2010-09-29 10:51 ` Andrii Dobrovol`s`kii
2010-10-01 5:15 ` Радик Юсупов
2010-09-29 12:15 ` Gennadii Redko
2010-09-30 6:14 ` Eugene Prokopiev
2010-10-01 5:18 ` Радик Юсупов
2010-10-01 5:51 ` Eugene Prokopiev
2010-10-01 6:50 ` Michael Shigorin
2010-10-01 7:43 ` Радик Юсупов
2010-10-06 4:06 ` Anton Kvashin
2010-10-04 5:00 ` Anton Kvashin
2010-10-04 5:17 ` Радик Юсупов
2010-10-05 15:55 ` Eugene Prokopiev
2010-10-06 3:52 ` Anton Kvashin
ALT Linux sysadmins discussion
This inbox may be cloned and mirrored by anyone:
git clone --mirror http://lore.altlinux.org/sysadmins/0 sysadmins/git/0.git
# If you have public-inbox 1.1+ installed, you may
# initialize and index your mirror using the following commands:
public-inbox-init -V2 sysadmins sysadmins/ http://lore.altlinux.org/sysadmins \
sysadmins@lists.altlinux.org sysadmins@lists.altlinux.ru sysadmins@lists.altlinux.com
public-inbox-index sysadmins
Example config snippet for mirrors.
Newsgroup available over NNTP:
nntp://lore.altlinux.org/org.altlinux.lists.sysadmins
AGPL code for this site: git clone https://public-inbox.org/public-inbox.git