From mboxrd@z Thu Jan 1 00:00:00 1970 Return-Path: X-Spam-Checker-Version: SpamAssassin 3.2.5 (2008-06-10) on sa.int.altlinux.org X-Spam-Level: X-Spam-Status: No, score=-2.6 required=5.0 tests=BAYES_00 autolearn=ham version=3.2.5 Message-ID: <4A36D97D.1050901@altlinux.ru> Date: Tue, 16 Jun 2009 03:30:05 +0400 From: Alexey Gladkov User-Agent: Mozilla/5.0 (X11; U; Linux i686; ru; rv:1.8.1.18) Gecko/20081202 Thunderbird/2.0.0.18 Mnenhy/0.7.5.0 MIME-Version: 1.0 To: devel@lists.altlinux.org References: <20090615223338.GA28555@wo.int.altlinux.org> In-Reply-To: <20090615223338.GA28555@wo.int.altlinux.org> X-Enigmail-Version: 0.96a Content-Type: text/plain; charset=UTF-8 Content-Transfer-Encoding: 8bit Subject: Re: [devel] =?utf-8?b?0L/RgNC+INCw0LLRgtC+0LzQsNGC0LjRh9C10YHQutC+?= =?utf-8?b?0LUg0Lgg0YDRg9GH0L3QvtC1INGC0LXRgdGC0LjRgNC+0LLQsNC90LjQtSA=?= =?utf-8?b?0L/QsNC60LXRgtC+0LI=?= X-BeenThere: devel@lists.altlinux.org X-Mailman-Version: 2.1.12 Precedence: list Reply-To: ALT Linux Team development discussions List-Id: ALT Linux Team development discussions List-Unsubscribe: , List-Archive: List-Post: List-Help: List-Subscribe: , X-List-Received-Date: Mon, 15 Jun 2009 23:32:02 -0000 Archived-At: List-Archive: List-Post: 16.06.2009 02:33, Dmitry V. Levin wrote: > Есть другие соображения на эту тему? Представь ситуацию: Я хочу выложить в сизиф новый firefox, собранный из trunk. Он уже открывает сайты и с ним работают расширения. На всё это можно написать тесты. Но вот на то, что на некоторых сайтах новый firefox валится на flash и на то что на определённых сайтах javascript падает в корку ты тестов не сделаешь, потому что это не регулярные ошибки, которые можно выяснить только ручным тестированием. Такой пакет сможет пройти автотесты, но в сизифе при регулярном использовании он будет НЕСТАБИЛЕН и ПАГУБЕН. Более живой пример: В данный момент, я проглядел изменения в firefox-uk, что привело к неработоспособности сочетания firefox-3.5+firefox-uk. Выявить такое через автотесты сложно. Автотестировиние всего множетва расширений и локализаций firefox (с учётом возможных конфликтов между расширениями) мне представляется очень сложной задачей. Вышесказанное относится и к многим большим сложным пользовательским интерактивным программам (попробуй формализовать автотесты на openoffice, kde, gnome, groff ...). Некоторые апстримные разработчики сами бьются над автотестами. Я не верю, что столь очевидные примеры, не приходили тебе в голову. Многие сложные интерактивные (хотя бы) программы легче отлаживать и притирать друг к другу не включая в HEAD сизифа. Ибо эта работа требует времени и промежуточных результатов для тестирования. P.S. Ситуация с firefox из trunk вымышленная. :) -- Rgrds, legion