From mboxrd@z Thu Jan  1 00:00:00 1970
Return-Path: <ddv@bgc.perm.ru>
X-Spam-Checker-Version: SpamAssassin 3.2.5 (2008-06-10) on sa.int.altlinux.org
X-Spam-Level: *
X-Spam-Status: No, score=1.1 required=5.0 tests=BAYES_50,DNS_FROM_OPENWHOIS
	autolearn=no version=3.2.5
Message-ID: <4DA67D2D.4010002@bgc.perm.ru>
Date: Thu, 14 Apr 2011 10:50:53 +0600
From: =?KOI8-R?Q?=E4=CD=C9=D4=D2=C9=CA_=E4=C5=C7=D4=D1=D2=C5=D7?=
	<ddv@bgc.perm.ru>
User-Agent: Mozilla/5.0 (X11; U; Linux x86_64; en-US;
	rv:1.9.2.16pre) Gecko/20110308 Thunderbird/3.1.10pre
MIME-Version: 1.0
To: ALT Linux Sisyphus discussions <sisyphus@lists.altlinux.org>
References: <4DA67A0D.2090605@bgc.perm.ru> <4DA67C3D.5080209@mmedia2.kemsu.ru>
In-Reply-To: <4DA67C3D.5080209@mmedia2.kemsu.ru>
Content-Type: text/plain; charset=KOI8-R; format=flowed
Content-Transfer-Encoding: 8bit
Subject: Re: [sisyphus] =?koi8-r?b?1MXeo9QgcHNxbD8=?=
X-BeenThere: sisyphus@lists.altlinux.org
X-Mailman-Version: 2.1.12
Precedence: list
Reply-To: ALT Linux Sisyphus discussions <sisyphus@lists.altlinux.org>
List-Id: ALT Linux Sisyphus discussions <sisyphus.lists.altlinux.org>
List-Unsubscribe: <https://lists.altlinux.org/mailman/options/sisyphus>,
	<mailto:sisyphus-request@lists.altlinux.org?subject=unsubscribe>
List-Archive: <http://lists.altlinux.org/pipermail/sisyphus>
List-Post: <mailto:sisyphus@lists.altlinux.org>
List-Help: <mailto:sisyphus-request@lists.altlinux.org?subject=help>
List-Subscribe: <https://lists.altlinux.org/mailman/listinfo/sisyphus>,
	<mailto:sisyphus-request@lists.altlinux.org?subject=subscribe>
X-List-Received-Date: Thu, 14 Apr 2011 04:50:59 -0000
Archived-At: <http://lore.altlinux.org/sisyphus/4DA67D2D.4010002@bgc.perm.ru/>
List-Archive: <http://lore.altlinux.org/sisyphus/>
List-Post: <mailto:sisyphus@altlinux.ru>

14.04.2011 10:46, REAL пишет:
> 14.04.2011 11:37, Дмитрий Дегтярев пишет:
>> всего строк 8-9 миллионов в день нужно загонять в базу.
>
> А разбить на транзакции никак? А то это же жуть - одной транзакцией 
> такие массивы гонять. Как крайний вариант, делать коммит после каждого 
> инсерта. Понимаю, что так дольше, но с памятью проблемы должны 
> исчезнуть. Вроде бы.
>
В Postgres Хранимые процедуры транзакционны поэтому каждая строка есть 
отдельная транзакция.
>> это не реально долго из-за 8000000 лишних запусков psql, реконнектов 
>> к базе...
>
> А нельзя ли сделать без реконнектов, т.е. один коннект, а транзакций 
> много? Я в psql ни в зуб ногой, но вообще-то нормальные СУБД обязаны 
> уметь такое.
>
Так и делаю, но почему то съедает память. Да и клиенту какая разница 
транзакция, insert, select, update, create.. Его задача отдать команду 
серверу и забыть про неё.