From: Igor Zubkov <igor.zubkov@gmail.com>
To: ALT Linux Team development discussions <devel@lists.altlinux.org>
Subject: Re: [devel] packages.altlinux.org search
Date: Wed, 22 Jun 2016 20:01:05 +0300
Message-ID: <CAJXf7QO3z56bfaHdNab=7LzZ1CmF_tP1ha6N9KWoP_b8_Wi-2g@mail.gmail.com> (raw)
In-Reply-To: <CAJXf7QOV-fApkketA9WZ_M7_QqCu0ypQbvBXpdC9MA80kY+ssw@mail.gmail.com>
2016-06-22 19:23 GMT+03:00 Igor Zubkov:
> Hi,
>
> Вот из-за чего была проблема:
>
> [Wed Jun 22 20:18:14.236 2016] [ 1884] WARNING: rotating index
> 'srpm_core': prealloc: mmap() failed: Cannot allocate memory
> (length=8890869); using old index
>
> Мы упирались в память и не обновляли данные в индексе для поиска. Я
> буду мониторить ситуацию и напишу отдельно когда найду из-за чего это
> происходит. И исправлю.
И так, оказалось что поисковый индекс вырос до того размера что он уже
не всегда помещается в памяти. В sphinx есть такая опция как
seamless_rotate которая отвечает за бесшовное обновления индекса для
поиска. После того как новый индекс создан, sphinx запускает searchd с
новым индексом, и только после того как он запустится, убивается
старый searchd со старым индексом. В этот момент как раз и не хватает
памяти. Отключил бесшовную миграцию индекса. Должно полегчать. Только
теперь пару минут в день поиск будет не доступен. Я думаю что мы
переживём. :)
--
Igor Zubkov
http://hi.im/ice
next prev parent reply other threads:[~2016-06-22 17:01 UTC|newest]
Thread overview: 5+ messages / expand[flat|nested] mbox.gz Atom feed top
2016-06-22 16:23 Igor Zubkov
2016-06-22 17:01 ` Igor Zubkov [this message]
2016-06-22 17:31 ` Hihin Ruslan
2016-06-23 3:00 ` Michael Shigorin
2016-06-23 6:10 ` Sergey Afonin
Reply instructions:
You may reply publicly to this message via plain-text email
using any one of the following methods:
* Save the following mbox file, import it into your mail client,
and reply-to-all from there: mbox
Avoid top-posting and favor interleaved quoting:
https://en.wikipedia.org/wiki/Posting_style#Interleaved_style
* Reply using the --to, --cc, and --in-reply-to
switches of git-send-email(1):
git send-email \
--in-reply-to='CAJXf7QO3z56bfaHdNab=7LzZ1CmF_tP1ha6N9KWoP_b8_Wi-2g@mail.gmail.com' \
--to=igor.zubkov@gmail.com \
--cc=devel@lists.altlinux.org \
/path/to/YOUR_REPLY
https://kernel.org/pub/software/scm/git/docs/git-send-email.html
* If your mail client supports setting the In-Reply-To header
via mailto: links, try the mailto: link
ALT Linux Team development discussions
This inbox may be cloned and mirrored by anyone:
git clone --mirror http://lore.altlinux.org/devel/0 devel/git/0.git
# If you have public-inbox 1.1+ installed, you may
# initialize and index your mirror using the following commands:
public-inbox-init -V2 devel devel/ http://lore.altlinux.org/devel \
devel@altlinux.org devel@altlinux.ru devel@lists.altlinux.org devel@lists.altlinux.ru devel@linux.iplabs.ru mandrake-russian@linuxteam.iplabs.ru sisyphus@linuxteam.iplabs.ru
public-inbox-index devel
Example config snippet for mirrors.
Newsgroup available over NNTP:
nntp://lore.altlinux.org/org.altlinux.lists.devel
AGPL code for this site: git clone https://public-inbox.org/public-inbox.git