Re: [room] автоматизированное тестирование и предвзятость

[Anton Chernyshov <flammifer@inbox.ru>]

7 ноября 2010 г. 12:59 пользователь Mike Lykov <combr@yandex.ru> написал:
>
> прочитал тут письмо с выражениями..
> " опубликованное на заборе "
> " даже не пошёл по ссылке.", "пустое место"
> " придётся оплевать"
>
> ну и т.д. Такое впечатление, что у автора gvy какая-то очень давняя и
> глубоко засаженная обида на ресурс и людей, которые правда об этом не
> подозревают, а то б наверно давно самоубились от впечатления "Ах, он почитал
> нас 5 лет назад и с тех пор не доверяет".
>
> Так вот они (phoronix) ничего не скрывают.
> у них есть автоматизированный Phoronix Test Suite, и они его распространяют
> свободно: Любой, в том чиле gvy, может пройти сюда
> http://www.phoronix-test-suite.com/?k=downloads
>
> скачать, установить свою копию тестового комплекта, проверить методику,
> исправить какие-то допущения если он почитает их неверными.
> Сделать свои тесты, опубликовать выводы... Что мешает это сделать вместо
> того, чтобы писать фигню о "оплеванных" и "давней репутации, из-за которой
> даже коснуться противно?"
> Если так противно - то может, просто промолчать? А то ведь становится
> противно читать как раз того, кто эмоционирует (gvy), а не того кто работает
> над технической стороной (phoronix).
>
> А тем временем не подозревающий phoronix как раз пишет..
>
> http://www.phoronix.com/scan.php?page=article&item=linux_2612_2637&num=1
> Five Years Of Linux Kernel Benchmarks: 2.6.12 Through 2.6.37
> Published on November 03, 2010
>
> http://www.phoronix.com/scan.php?page=article&item=pts_iveland_obo&num=1
> How Linux Benchmarking Will Change With Iveland & OpenBenchmarking.org
> Published on October 20, 2010
>
> есть конструктивные возражения?
>

Приведенная ниже фраза Вам что-нибудь о профессионализме тестеров говорит?

However, in order to run Fedora Core 4 on the Core i7 970 desktop
system rather than 2005-era hardware where this benchmarking process
would have easily taken weeks, __we ran all tests from within a Fedora
Core 4 virtual machine__.

Не кажется странным тестировать быстродействие ядер внутри виртуалки?
Особенно прикольно смотрится выбор системы. Вместо того, чтобы взять
какой-нибудь Pentium 4, хорошо "известный" и ядру 2.6.12 и последним
2.6.37 - на что они там взгромоздили свою TestSuite? Ах, да. На Core
i7.

-- 
С уважением,
Чернышов Антон