ALT Linux Team development discussions
 help / color / mirror / Atom feed
From: "Ivan A. Melnikov" <iv@altlinux.org>
To: ALT Linux Team development discussions <devel@lists.altlinux.org>
Subject: Re: [devel] пакеты для численного счета
Date: Mon, 21 Sep 2020 13:49:44 +0400
Message-ID: <20200921094944.ixk2d3efmfhslg47@titan.localdomain> (raw)
In-Reply-To: <20200920132814.GC26263@imap.altlinux.org>

On Sun, Sep 20, 2020 at 04:28:14PM +0300, Vladislav Zavjalov wrote:
> Еще поразбирался с Blas/Lapack. Это старые-добрые фортрановские библиотеки
> "Basic Linear Algebra Subroutines" и "Linear Algebra PACKage" -
> работа с матрицами, и решение систем линейных уравнений. Lapack использует Blas.
> 
> У нас сейчас есть следующее:
> 
> * blas -- "стандартный" blas.
>   http://www.netlib.org/blas/
> 
> * liblapack -- "стандартный" lapack. У нас собран с openblas.
>   http://www.netlib.org/lapack/
> 
> * openblas -- Оптимизированная версия Blas, с поддержкой
>   многопоточных вычислений и т.п.
>   https://github.com/xianyi/OpenBLAS
> 
>   Openblas может и сам предоставлять стандартный lapack, но у нас он собран с ключом
>   NO_LAPACK=1. При этом в заголовочные файлы функции из lapack попадают, а
>   в библиотеку - нет. В результате, при сборке разных программ возникают
>   проблемы на этапе линковки, даже если liblapack-devel есть в системе.
>   Приходится вручную указывать, что линковаться надо с libopenblas + liblapack.
> 
> * libatlas -- Оптимизированный blas + небольшая часть lapack.
>   http://math-atlas.sourceforge.net/
> 
>   У нас очень старая версия, собирается только под i586 и x86_64.
>   Это довольно странная библиотека, и я не уверен, что
>   ее следует держать в репозитории. Дело в том, что она оптимизирует функции из
>   blas/lapack под конкретный процессор - на этапе сборки.

Насколько я понял, она может при сборке погонять бенчмарки
в процессе сборки, и выбрать варианты релизации, лучше подходящие
для конкретного железа, но при сборке именно пакета этого не делается,
а используются готовые профили, оптимизированные под некое обобщённое
непонятно что.

>   Не очень понятно,
>   имеют ли эти оптимизации смысл при распространении в виде бинарных пакетов.
>   Например, явно написано, что оптимизации будут бессмысленны при включенном
>   CPU throttling и лучше тогда использовать обычный blas.
>   Как сделать "правильную" сборку - не очень понятно.
> 
> 
> Не уверен, что я понял все тонкости. Пока мне кажется разумным следующее:
> 
> * Исправить openblas, чтобы с NO_LAPACK=1 он не делал вид, что
>   предоставляет lapack.
>   Если это сложно, то использовать его встроенный lapack +
>   отвязать liblapack от openblas.
> 
> * Может быть, удалить blas + liblapack и использовать только openblas.

openblas традиционно не умеет mipsel, и, кажется, riscv.
Под mipsel её собрать вроде бы можно парой нехитрых патчей,
но я что-то не решился, так как непонятны критерии
работоспособности, приемлимости и всего такого.

С другой стороны, идея одного дистрибутивного blas и lapack
выглядит очень привлекательной.

> * Удалить libatlas, пересобрав клиентов с openblas.
> 
> Еще бы понять, какие клиенты используют эти библиотеки...
> 
> _______________________________________________
> Devel mailing list
> Devel@lists.altlinux.org
> https://lists.altlinux.org/mailman/listinfo/devel


  parent reply	other threads:[~2020-09-21  9:49 UTC|newest]

Thread overview: 23+ messages / expand[flat|nested]  mbox.gz  Atom feed  top
2020-09-20 10:36 Vladislav Zavjalov
2020-09-20 13:28 ` Vladislav Zavjalov
2020-09-20 16:34   ` Vladimir D. Seleznev
2020-09-20 18:41     ` Vladislav Zavjalov
2020-09-20 18:53       ` Vladislav Zavjalov
2020-09-20 21:47         ` Vladimir D. Seleznev
2020-09-20 21:56           ` Vladislav Zavjalov
2020-09-21 19:54           ` Vitaly Lipatov
2020-09-21 20:10             ` Vladimir D. Seleznev
2020-09-22  3:44               ` Anton Farygin
2020-09-22 14:26             ` Igor Vlasenko
2020-09-20 19:00       ` Andrey Savchenko
2020-09-20 20:25         ` Vladislav Zavjalov
2020-09-21 19:24           ` Andrey Savchenko
2020-09-22 11:24     ` Vladimir D. Seleznev
2020-09-21  9:49   ` Ivan A. Melnikov [this message]
2020-09-21 10:25     ` Vladislav Zavjalov
2020-09-25 12:20   ` Anton Farygin
2020-09-25 12:55     ` Vladislav Zavjalov
2020-09-25 15:15       ` Anton Farygin
2020-09-25 15:48         ` Vladislav Zavjalov
2020-09-25 19:52         ` Andrey Savchenko
2020-09-28  8:19           ` Vladislav Zavjalov

Reply instructions:

You may reply publicly to this message via plain-text email
using any one of the following methods:

* Save the following mbox file, import it into your mail client,
  and reply-to-all from there: mbox

  Avoid top-posting and favor interleaved quoting:
  https://en.wikipedia.org/wiki/Posting_style#Interleaved_style

* Reply using the --to, --cc, and --in-reply-to
  switches of git-send-email(1):

  git send-email \
    --in-reply-to=20200921094944.ixk2d3efmfhslg47@titan.localdomain \
    --to=iv@altlinux.org \
    --cc=devel@lists.altlinux.org \
    /path/to/YOUR_REPLY

  https://kernel.org/pub/software/scm/git/docs/git-send-email.html

* If your mail client supports setting the In-Reply-To header
  via mailto: links, try the mailto: link

ALT Linux Team development discussions

This inbox may be cloned and mirrored by anyone:

	git clone --mirror http://lore.altlinux.org/devel/0 devel/git/0.git

	# If you have public-inbox 1.1+ installed, you may
	# initialize and index your mirror using the following commands:
	public-inbox-init -V2 devel devel/ http://lore.altlinux.org/devel \
		devel@altlinux.org devel@altlinux.ru devel@lists.altlinux.org devel@lists.altlinux.ru devel@linux.iplabs.ru mandrake-russian@linuxteam.iplabs.ru sisyphus@linuxteam.iplabs.ru
	public-inbox-index devel

Example config snippet for mirrors.
Newsgroup available over NNTP:
	nntp://lore.altlinux.org/org.altlinux.lists.devel


AGPL code for this site: git clone https://public-inbox.org/public-inbox.git