From: Eugene Prokopiev <enp@altlinux.org>
To: ALT Linux Team development discussions <devel@lists.altlinux.org>
Subject: [devel] Еще раз о правильном аналоге packages.altlinux.org
Date: Fri, 12 Feb 2021 12:38:30 +0300
Message-ID: <CANM4RuiFVOG=z+Dsr3kZcOwt3sqyY=EjD-UpjTpbC8=wY=uQHw@mail.gmail.com> (raw)
In-Reply-To: <3144a4d4-7e07-3cfe-0384-aa6be9211084@basealt.ru>
вт, 9 февр. 2021 г. в 11:26, Anton Farygin <rider@basealt.ru>:
> > curl
> > https://repodb.basealt.space/package_info?name=kernel-image-un-def |jq
> >
> > Мне понравилось. Отдаёт всё очень шустро. :-)
> > Использует rpmlib или данные лежат в какой-то базе?
>
> Лежит в clickhouse.
>
> в rpmlib невозможно в принципе держать данные для почти трёх миллионов
> пакетов.
Антон, а нельзя ли это переложить в elasticsearch и за счет некоторого
снижения производительности и/или увеличения требований к железу (вряд
ли критичному) получить возможность писать запросы к этой БД через
довольно удобный DSL over HTTP и рисовать в Kibana (и не только)
различные дашборды?
Ок, я в курсе лицензионных вопросов по эластику, СlickHouse тоже
неплох - особенно если структура БД будет опубликована и к ней можно
будет писать SQL-запросы через HTTP
На самом деле вопрос сводится к:
* вменяемому HTTP API для поиска по репозиториям/пакетам
* возможности связать вывод такого API и сборочные логи/таски
* удобному фронтенду (но уже потом)
Мне было бы интересно принять в этом посильное участие - но для начала
нужен какой-то список требований с приоритетами + понимание откуда
брать исходные данные
--
WBR,
Eugene Prokopiev
next prev parent reply other threads:[~2021-02-12 9:38 UTC|newest]
Thread overview: 76+ messages / expand[flat|nested] mbox.gz Atom feed top
2020-08-19 8:21 [devel] https://repology.org/ Sergey Afonin
2020-08-19 8:42 ` Dmitry V. Levin
2020-08-19 8:44 ` Anton Farygin
2020-08-19 18:49 ` Leonid Krivoshein
2021-02-06 16:31 ` Mikhail Novosyolov
2021-02-06 16:48 ` Dmitry V. Levin
2021-02-07 12:46 ` Andrey Cherepanov
2021-02-07 12:57 ` Sergey Y. Afonin
2021-02-07 14:59 ` Dmitry V. Levin
2021-02-07 15:21 ` Dmitry V. Levin
2021-02-07 15:44 ` Alexey Gladkov
2021-02-07 16:07 ` Sergey Y. Afonin
2021-02-07 16:15 ` Alexey Gladkov
2021-02-07 16:27 ` Dmitry V. Levin
2021-02-07 16:48 ` Sergey Y. Afonin
2021-02-07 18:09 ` Alexey Gladkov
2021-02-07 18:35 ` [devel] webery.altlinux.org Sergey Y. Afonin
2021-02-07 17:30 ` [devel] сайты о репозиториях и сборках (was: https://repology.org/) Michael Shigorin
2021-02-07 18:07 ` Alexey Gladkov
2021-02-07 16:00 ` [devel] https://repology.org/ Sergey Y. Afonin
2021-02-08 8:43 ` Anton Farygin
2021-02-09 1:40 ` Leonid Krivoshein
2021-02-09 4:55 ` Anton Farygin
2021-02-09 5:30 ` Leonid Krivoshein
2021-02-09 8:26 ` Anton Farygin
2021-02-12 9:38 ` Eugene Prokopiev [this message]
2021-02-12 17:25 ` [devel] Еще раз о правильном аналоге packages.altlinux.org Anton Farygin
2021-02-12 18:02 ` Mikhail Novosyolov
2021-02-13 7:39 ` Anton Farygin
2021-02-13 9:11 ` Vladimir D. Seleznev
2021-02-13 10:24 ` Anton Farygin
2021-02-09 5:20 ` [devel] https://repology.org/ Leonid Krivoshein
2021-02-10 10:25 ` Mikhail Novosyolov
2021-02-12 10:12 ` Mikhail Novosyolov
2021-02-07 17:28 ` Michael Shigorin
2021-02-08 8:41 ` Anton Farygin
2021-02-07 16:57 ` Sergey Y. Afonin
2021-02-07 17:19 ` Dmitry V. Levin
2021-02-07 17:23 ` [devel] inheritance check и missing last changelog entry Sergey Y. Afonin
2021-02-08 17:44 ` Sergey Y. Afonin
2021-02-08 17:48 ` Dmitry V. Levin
2021-02-09 11:48 ` Sergey Afonin
2021-02-09 12:01 ` Антон Мидюков
2021-02-09 12:23 ` Sergey Afonin
2021-02-09 12:38 ` Sergey Afonin
2021-02-09 12:56 ` Dmitry V. Levin
2021-02-09 13:02 ` Sergey Afonin
2021-02-09 11:58 ` Michael Shigorin
2021-02-09 12:25 ` Sergey Afonin
2020-08-19 19:04 ` [devel] https://repology.org/ Leonid Krivoshein
2020-08-20 3:07 ` Anton Farygin
2021-02-06 12:26 ` Sergey Y. Afonin
2021-02-06 16:08 ` Michael Shigorin
2021-02-06 16:09 ` Dmitry V. Levin
2020-08-20 6:22 ` Sergey Afonin
2021-02-08 7:56 ` Sergey V Turchin
2021-02-08 17:00 ` Sergey Y. Afonin
2020-08-19 8:44 ` Alexey V. Vissarionov
2020-08-19 8:49 ` Anton Farygin
2020-08-19 8:54 ` Alexey V. Vissarionov
2020-08-19 9:07 ` Anton Farygin
2020-08-19 9:19 ` Dmitry V. Levin
2020-08-19 9:27 ` Anton Farygin
2020-08-19 9:27 ` Andrey Savchenko
2020-08-19 11:06 ` Michael Shigorin
2020-08-19 12:09 ` Andrey Savchenko
2020-08-19 12:50 ` Michael Shigorin
2020-08-19 14:14 ` Andrey Savchenko
2020-08-19 9:26 ` Alexey V. Vissarionov
2020-08-19 11:01 ` Michael Shigorin
2020-08-19 11:09 ` Anton Farygin
2020-08-19 11:35 ` Sergey V Turchin
2020-08-19 11:37 ` Anton Farygin
2021-02-06 16:27 ` Mikhail Novosyolov
2020-08-19 8:53 ` Anton Farygin
2020-08-19 10:56 ` Michael Shigorin
Reply instructions:
You may reply publicly to this message via plain-text email
using any one of the following methods:
* Save the following mbox file, import it into your mail client,
and reply-to-all from there: mbox
Avoid top-posting and favor interleaved quoting:
https://en.wikipedia.org/wiki/Posting_style#Interleaved_style
* Reply using the --to, --cc, and --in-reply-to
switches of git-send-email(1):
git send-email \
--in-reply-to='CANM4RuiFVOG=z+Dsr3kZcOwt3sqyY=EjD-UpjTpbC8=wY=uQHw@mail.gmail.com' \
--to=enp@altlinux.org \
--cc=devel@lists.altlinux.org \
/path/to/YOUR_REPLY
https://kernel.org/pub/software/scm/git/docs/git-send-email.html
* If your mail client supports setting the In-Reply-To header
via mailto: links, try the mailto: link
ALT Linux Team development discussions
This inbox may be cloned and mirrored by anyone:
git clone --mirror http://lore.altlinux.org/devel/0 devel/git/0.git
# If you have public-inbox 1.1+ installed, you may
# initialize and index your mirror using the following commands:
public-inbox-init -V2 devel devel/ http://lore.altlinux.org/devel \
devel@altlinux.org devel@altlinux.ru devel@lists.altlinux.org devel@lists.altlinux.ru devel@linux.iplabs.ru mandrake-russian@linuxteam.iplabs.ru sisyphus@linuxteam.iplabs.ru
public-inbox-index devel
Example config snippet for mirrors.
Newsgroup available over NNTP:
nntp://lore.altlinux.org/org.altlinux.lists.devel
AGPL code for this site: git clone https://public-inbox.org/public-inbox.git