From: "Дмитрий Дегтярев" <ddv@bgc.perm.ru> To: ALT Linux Sisyphus discussions <sisyphus@lists.altlinux.org> Subject: Re: [sisyphus] течёт psql? Date: Thu, 14 Apr 2011 10:50:53 +0600 Message-ID: <4DA67D2D.4010002@bgc.perm.ru> (raw) In-Reply-To: <4DA67C3D.5080209@mmedia2.kemsu.ru> 14.04.2011 10:46, REAL пишет: > 14.04.2011 11:37, Дмитрий Дегтярев пишет: >> всего строк 8-9 миллионов в день нужно загонять в базу. > > А разбить на транзакции никак? А то это же жуть - одной транзакцией > такие массивы гонять. Как крайний вариант, делать коммит после каждого > инсерта. Понимаю, что так дольше, но с памятью проблемы должны > исчезнуть. Вроде бы. > В Postgres Хранимые процедуры транзакционны поэтому каждая строка есть отдельная транзакция. >> это не реально долго из-за 8000000 лишних запусков psql, реконнектов >> к базе... > > А нельзя ли сделать без реконнектов, т.е. один коннект, а транзакций > много? Я в psql ни в зуб ногой, но вообще-то нормальные СУБД обязаны > уметь такое. > Так и делаю, но почему то съедает память. Да и клиенту какая разница транзакция, insert, select, update, create.. Его задача отдать команду серверу и забыть про неё.
next prev parent reply other threads:[~2011-04-14 4:50 UTC|newest] Thread overview: 7+ messages / expand[flat|nested] mbox.gz Atom feed top 2011-04-14 4:37 Дмитрий Дегтярев 2011-04-14 4:46 ` REAL 2011-04-14 4:50 ` Дмитрий Дегтярев [this message] 2011-04-14 5:01 ` REAL 2011-04-14 5:44 ` Дмитрий Дегтярев 2011-04-14 5:34 ` Eugene Prokopiev 2011-04-14 6:16 ` Andrey Liakhovets
Reply instructions: You may reply publicly to this message via plain-text email using any one of the following methods: * Save the following mbox file, import it into your mail client, and reply-to-all from there: mbox Avoid top-posting and favor interleaved quoting: https://en.wikipedia.org/wiki/Posting_style#Interleaved_style * Reply using the --to, --cc, and --in-reply-to switches of git-send-email(1): git send-email \ --in-reply-to=4DA67D2D.4010002@bgc.perm.ru \ --to=ddv@bgc.perm.ru \ --cc=sisyphus@lists.altlinux.org \ /path/to/YOUR_REPLY https://kernel.org/pub/software/scm/git/docs/git-send-email.html * If your mail client supports setting the In-Reply-To header via mailto: links, try the mailto: link
ALT Linux Sisyphus discussions This inbox may be cloned and mirrored by anyone: git clone --mirror http://lore.altlinux.org/sisyphus/0 sisyphus/git/0.git # If you have public-inbox 1.1+ installed, you may # initialize and index your mirror using the following commands: public-inbox-init -V2 sisyphus sisyphus/ http://lore.altlinux.org/sisyphus \ sisyphus@altlinux.ru sisyphus@altlinux.org sisyphus@lists.altlinux.org sisyphus@lists.altlinux.ru sisyphus@lists.altlinux.com sisyphus@linuxteam.iplabs.ru sisyphus@list.linux-os.ru public-inbox-index sisyphus Example config snippet for mirrors. Newsgroup available over NNTP: nntp://lore.altlinux.org/org.altlinux.lists.sisyphus AGPL code for this site: git clone https://public-inbox.org/public-inbox.git