From mboxrd@z Thu Jan  1 00:00:00 1970
Return-Path: <root@mmedia2.kemsu.ru>
X-Spam-Checker-Version: SpamAssassin 3.2.5 (2008-06-10) on sa.int.altlinux.org
X-Spam-Level: 
X-Spam-Status: No, score=0.9 required=5.0 tests=BAYES_40,DNS_FROM_OPENWHOIS
	autolearn=no version=3.2.5
Message-ID: <4DA67C3D.5080209@mmedia2.kemsu.ru>
Date: Thu, 14 Apr 2011 11:46:53 +0700
From: REAL <root@mmedia2.kemsu.ru>
User-Agent: Mozilla/5.0 (X11; U; Linux i686; en-US;
	rv:1.9.2.16pre) Gecko/20110308 Thunderbird/3.1.10pre
MIME-Version: 1.0
To: ALT Linux Sisyphus discussions <sisyphus@lists.altlinux.org>
References: <4DA67A0D.2090605@bgc.perm.ru>
In-Reply-To: <4DA67A0D.2090605@bgc.perm.ru>
Content-Type: text/plain; charset=KOI8-R; format=flowed
Content-Transfer-Encoding: 8bit
Subject: Re: [sisyphus] =?koi8-r?b?1MXeo9QgcHNxbD8=?=
X-BeenThere: sisyphus@lists.altlinux.org
X-Mailman-Version: 2.1.12
Precedence: list
Reply-To: ALT Linux Sisyphus discussions <sisyphus@lists.altlinux.org>
List-Id: ALT Linux Sisyphus discussions <sisyphus.lists.altlinux.org>
List-Unsubscribe: <https://lists.altlinux.org/mailman/options/sisyphus>,
	<mailto:sisyphus-request@lists.altlinux.org?subject=unsubscribe>
List-Archive: <http://lists.altlinux.org/pipermail/sisyphus>
List-Post: <mailto:sisyphus@lists.altlinux.org>
List-Help: <mailto:sisyphus-request@lists.altlinux.org?subject=help>
List-Subscribe: <https://lists.altlinux.org/mailman/listinfo/sisyphus>,
	<mailto:sisyphus-request@lists.altlinux.org?subject=subscribe>
X-List-Received-Date: Thu, 14 Apr 2011 04:42:50 -0000
Archived-At: <http://lore.altlinux.org/sisyphus/4DA67C3D.5080209@mmedia2.kemsu.ru/>
List-Archive: <http://lore.altlinux.org/sisyphus/>
List-Post: <mailto:sisyphus@altlinux.ru>

14.04.2011 11:37, Дмитрий Дегтярев пишет:
> всего строк 8-9 миллионов в день нужно загонять в базу.

А разбить на транзакции никак? А то это же жуть - одной транзакцией 
такие массивы гонять. Как крайний вариант, делать коммит после каждого 
инсерта. Понимаю, что так дольше, но с памятью проблемы должны 
исчезнуть. Вроде бы.

> это не реально долго из-за 8000000 лишних запусков psql, реконнектов к базе...

А нельзя ли сделать без реконнектов, т.е. один коннект, а транзакций 
много? Я в psql ни в зуб ногой, но вообще-то нормальные СУБД обязаны 
уметь такое.

-- 

REAL aka Евгений Ростовцев, программист ЦНИТ КемГУ